无法在 Python 中加载以前转储的泡菜文件

Question

我使用的实现算法非常繁重，分为三个部分。因此，我使用 pickle 在各个阶段之间转储所有内容，以便分别对每个阶段进行测试。

虽然第一个转储总是可以正常工作，但第二个转储的行为就好像它取决于大小。它适用于较小的数据集，但不适用于较大的数据集。 （实际上我尝试创建的热图也会发生同样的情况，但这是一个不同的问题）转储的文件大约 10MB，所以它并不是很大。

产生问题的转储包含一个完整的类，该类又包含方法、字典、列表和变量。

我实际上尝试从课堂内外倾倒，但都失败了。 我使用的代码如下所示：

data = pickle.load(open("./data/tmp/data.pck", 'rb')) #Reads from the previous stage dump and works fine.
dataEvol = data.evol_detect(prevTimeslots, xLablNum) #Export the class to dataEvol
dataEvolPck = open("./data/tmp/dataEvol.pck", "wb") #open works fine
pickle.dump(dataEvol, dataEvolPck, protocol = 2) #dump works fine
dataEvolPck.close()

甚至尝试过这个：

dataPck = open("./data/tmp/dataFull.pck", "wb")
pickle.dump(self, dataPck, protocol=2) #self here is the dataEvol in the previous part of code
dataPck.close()

当我尝试使用此部分加载类时出现问题：

dataEvol = pickle.load(open("./data/tmp/dataEvol.pck", 'rb'))

手头的错误是：

Traceback (most recent call last):
File "<pyshell#0>", line 1, in <module>
dataEvol = pickle.load(open("./data/tmp/dataEvol.pck", 'rb'))
ValueError: itemsize cannot be zero

有什么想法吗？ 我在 64 位 Win-7 计算机上使用 Python 3.3。如果我遗漏了任何重要内容，请原谅我，因为这是我的第一个问题。

---

答案：

问题是其中一个字典中有一个空的 numpy 字符串。谢谢珍妮！！！

Answer 1

这是最近在此pull request 中修复的 NumPy 错误。要重现它，请尝试：

import cPickle
import numpy as np
cPickle.loads(cPickle.dumps(np.string_('')))