编辑大型 Python 文件会消耗系统资源

Question

我正在创建一个包含 2,000 个字符串条目的列表变量的文件。

请注意，我不是在谈论何时运行代码，而是在我键入创建文件时，我的计算机是否开始占用大量内存。一旦我从第 6 行删除所有这些单词，就会清除。

我正在 IDLE 中编辑。 名单在这里：http://pastebin.com/uwpKriZ3

仅供参考

这里是简短的示例代码：

import random

# The following line is unwrapped and, in the actual script,
# contains 26431 characters comprising 2000 words:
list1 = ['aback', 'abaft', 'abandoned', 'abashed', 'aberrant', 'abhorrent', 'abiding']

rndword = random.choice(list1)
brokenword = list(rndword)

Answer 1

那个变量赋值行有 26431 个字符——长到足以让 emacs 运行缓慢。尝试执行查找/替换以将每个逗号替换为逗号后跟换行符。

大多数时候在编写实际程序时，如果需要加载大量数据，可以从文件中读取数据。在 python 中执行此操作：

#!/usr/bin/env python
import random
import io

list1 = [line.strip() for line in io.open('data.txt', 'r', encoding="utf-8-sig")]

rndword = random.choice(list1)
brokenword = list(rndword)
print(brokenword)

从外部来源读取数据会认识到数据和代码是不同的东西。它还鼓励代码可重用/泛化。例如，您可能会想出一个可以应用于不同数据集的有用算法。当您可以拥有一个无需修改即可提供不同数据的精美 Python 脚本时，为什么要将数据集直接放入源代码中呢？只需将代码和数据分开，您就会突然拥有更简洁、更可重用的代码。