【问题标题】:Python memory limit? Clear GC when close to limit?Python内存限制?接近限制时清除 GC?
【发布时间】:2011-09-22 15:33:09
【问题描述】:

如何在执行其他内存密集型操作之前清除垃圾收集的对象?还是内存满时自动完成?

为什么看起来 Python (+Eclipse) 会在 2 GB (Win32) 处引发内存异常,而实际上在 Windows 上仍有一些内存未使用?是否在任何地方都定义了限制?

【问题讨论】:

  • 这么高的内存使用是意料之中的还是内存泄漏?在后一种情况下,没有 GC 可以提供帮助,您必须自己查找并修复泄漏。
  • 在这种情况下,这是意料之中的,但是我会考虑一些高级功能,我不会一次加载所有数据,而是在仅引用的硬盘驱动器上存储一些冗长的位。

标签: python windows eclipse memory garbage-collection


【解决方案1】:

您可以使用gc 模块调整垃圾收集器的性能——例如,使用gc.set_threshold——或者您可以“手动”收集垃圾:gc.collect。但是,我相信大多数时候,对象的引用计数一变为零就会被收集。

所以要明确一点,(感谢 delnan!)垃圾收集仅在存在使引用计数不为零的循环引用时才会出现问题。

还要注意gc 文档中的这一行:

调试泄漏程序调用gc.set_debug(gc.DEBUG_LEAK)

【讨论】:

  • 请注意,CPython 所谓的垃圾收集器只是循环引用的 GC。一旦它们变得无法访问,所有不在循环中的对象都将通过引用计数来处理。当然,这假设它们确实变得无法访问,并且您没有保留不再需要的引用。
【解决方案2】:

在 Windows 32 位应用程序上,最大内存限制为 2GB。有一个引导选项会将其撞到3Gb。您也可以尝试升级到 64 位 Windows/Python。

【讨论】:

  • 升级可能意味着另一个处理器? :) 我在家里有,但在工作的电脑很旧而且预算有限......
猜你喜欢
  • 2015-07-21
  • 1970-01-01
  • 2011-03-21
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2014-02-01
相关资源
最近更新 更多