如何忽略csv文件中的空白行

Question

我正在使用 dictreader 打开一些 csv 文件，将它们添加到一个大字典列表中，然后使用 dictwriter 将字典列表写入一个 csv 文件。

我遇到的问题是生成的 csv 文件在数据行之间有一堆空白行。我猜当读取 csv 文件时，它不会忽略空白行。

有人可以向我发送正确的方向以找到我说忽略空白行的方法吗？

我尝试在 csv 模块中找到它，但没有任何乐趣。

任何帮助将不胜感激。

嗨！感谢回复！ 如果有任何感兴趣的内容，我更希望 dictreader 读取行，但只有当它完全空白时才会忽略一行。例如，如果我有

{'1': '', '2': 'two', '3': ''},
{'1': '', '2': '', '3': ''}

我只想保留

{'1': '', '2': 'two', '3': ''} 

我发现以下内容对我有用

for dictionary in csv.DictReader(open(filename)):
    if any(x != '' for x in dictionary.itervalues()):

Answer 1

如果我理解正确，您只需在将字典转储到文件之前过滤空行即可。一个帮助您入门的简单示例：

>>> d = {'l1': 'data', 'l2': '   '}
>>> dict([(k, v) for k, v in d.iteritems() if v.strip()])
{'l1': 'data'}

这有帮助吗？

Answer 2

您可以读取跳过真实文件中的空行的假文件对象。我不熟悉你在做什么，但是如果空行使你的阅读过程崩溃，或者你真的不希望空行在那里，这将比 mac 的答案更好。

class BlankLineSkipper(object):
    def __init__(self, file):
        self.file = file
    def __iter__(self):
        return (line for line in self.file if line.strip())
    def read(self):
        return ''.join(self)

>>> print open('lol.csv').read()
5,7,8

1,2,3

abc,lol,haha


>>> list(csv.reader(open('lol.csv')))
[['5', '7', '8'], [], ['1', '2', '3'], [], ['abc', 'lol', 'haha'], []]

>>> list(csv.reader(BlankLineSkipper(open('lol.csv'))))
[['5', '7', '8'], ['1', '2', '3'], ['abc', 'lol', 'haha']]

（您可能需要实现readline() 或其他东西才能使您的代码正常工作，具体取决于它使用文件对象的方式。）

Answer 3

您对行的迭代形成了 dictreader，然后仅“使用”具有值的行。 mac 检查值的列表理解应该是通过返回空字典来清除不需要的行的正确方法。即使所有键都不存在，您也可以使用 dictwriter 对象写出结果字典 {'2': 'two'}。

下面的示例检查行 dict 以查看它是否分配了任何值。

column_headers = ["1", "2", "3"]
dictwriter = csv.DictWriter(open("output.csv", "wb"), fieldnames=column_headers)
for line in dictreader:
    # check if the line contains "interesting" values.
    # --> Result will be empty list if not and evaluate to False
    if [True for v in line.values() if v.strip()]: 
        # line is not EMPTY, process as desired
        dictwriter.writerow(line)