内存错误，蟒蛇

Question

处理 .xml 文件 = 1,45 Gb 时出现 MemoryError。我试图在一个较小的文件上运行它并且它可以工作，所以代码中不应该有任何错误。代码本身意味着打开一个 xml 文件，在里面做一些事情并将其保存回一个新的 txt 文件。我运行 Win7 x86、2 Gb RAM、Python 2.6

Traceback (most recent call last):
  File "<pyshell#0>", line 1, in <module>
    openfile('ukwiki-latest-pages-articles.xml')
  File "C:\Users\Vof Freeman\Desktop\Python\test.py", line 7, in openfile
    contents = F.read()
  File "C:\Python26\lib\codecs.py", line 666, in read
    return self.reader.read(size)
  File "C:\Python26\lib\codecs.py", line 466, in read
    newdata = self.stream.read()
MemoryError

Answer 1

由于构建内存树是不可取的（在您的情况下也不实用，考虑到您拥有的物理内存量），您可以使用两种技术lxml：

• 提供目标解析器类
• 使用iterparse 方法

请参阅文档here 了解如何做到这一点。

Answer 2

简单地说，您没有足够的 RAM 来读取此文件。您应该将其拆分为较小的 XML 文件并以这种方式读取。

它在较小的文件上工作的事实告诉我，您的代码没有任何问题，只是您的硬件无法处理它。