用 Python 编写的 CSV 文件在每行之间有空行

Question

import csv

with open('thefile.csv', 'rb') as f:
  data = list(csv.reader(f))
  import collections
  counter = collections.defaultdict(int)

  for row in data:
        counter[row[10]] += 1


with open('/pythonwork/thefile_subset11.csv', 'w') as outfile:
    writer = csv.writer(outfile)
    for row in data:
        if counter[row[10]] >= 504:
           writer.writerow(row)

此代码读取thefile.csv，进行更改并将结果写入thefile_subset1。

但是，当我在 Microsoft Excel 中打开生成的 csv 时，每条记录后都会有一个额外的空白行！

有没有办法让它不放额外的空行？

Answer 1

在 Python 2 中，使用模式 'wb' 而不是 'w' 打开 outfile。 csv.writer 直接将\r\n 写入文件。如果您不以 binary 模式打开文件，它将写入 \r\r\n，因为在 Windows 上 text 模式会将每个 \n 转换为 \r\n。

在 Python 3 中，所需的语法发生了变化，csv 模块现在可以使用文本模式 'w'，但还需要 newline=''（空字符串）参数来禁止 Windows 行转换（请参阅下面的文档链接）。

示例：

# Python 2
with open('/pythonwork/thefile_subset11.csv', 'wb') as outfile:
    writer = csv.writer(outfile)

# Python 3
with open('/pythonwork/thefile_subset11.csv', 'w', newline='') as outfile:
    writer = csv.writer(outfile)

文档链接

• https://docs.python.org/2/library/csv.html#csv.writer
• https://docs.python.org/3/library/csv.html#csv.writer

Answer 2

以二进制模式“wb”打开文件在 Python 3+ 中不起作用。或者更确切地说，您必须在写入数据之前将其转换为二进制。这只是一个麻烦。

相反，您应该将其保持为文本模式，但将换行符覆盖为空。像这样：

with open('/pythonwork/thefile_subset11.csv', 'w', newline='') as outfile:

Answer 3

简单的答案是 csv 文件应始终以二进制模式打开，无论是输入还是输出，否则在 Windows 上会出现行尾问题。特别是在输出时，csv 模块将写入\r\n（标准CSV 行终止符），然后（在文本模式下）运行时将\n 替换为\r\n（Windows 标准行终止符）给出@987654325 的结果@。

摆弄lineterminator 不是解决办法。

Answer 4

注意：这似乎不是首选的解决方案，因为在 Windows 系统上添加了额外的行。如python document中所述：

如果 csvfile 是文件对象，则必须在不同的平台上使用“b”标志打开它。

Windows 就是这样一个可以发挥作用的平台。虽然如下所述更改行终止符可能已经解决了问题，但可以通过以二进制模式打开文件来完全避免该问题。有人可能会说这种解决方案更“优雅”。在这种情况下，“摆弄”行终止符可能会导致系统之间的代码不可移植，在 unix 系统上以二进制模式打开文件不会产生任何效果。 IE。它会产生跨系统兼容的代码。

来自Python Docs：

在 Windows 上，“b”附加到模式 以二进制模式打开文件，所以 还有像'rb'，'wb'这样的模式， 和'r+b'。 Windows 上的 Python 使 文本和二进制的区别 文件；中的行尾字符 文本文件会自动更改 读取或写入数据时稍微。 这个幕后修改为 文件数据适用于 ASCII 文本 文件，但它会损坏二进制数据 像 JPEG 或 EXE 文件中的那样。是 使用二进制模式时非常小心 读取和写入此类文件。在 Unix，附加一个'b'并没有什么坏处 到模式，所以你可以使用它 平台无关的所有二进制文件 文件。

原创：

作为 csv.writer 可选参数的一部分，如果您获得额外的空白行，您可能需要更改换行符（信息 here）。下面的示例改编自 python 页面 csv docs. 将其从 '\n' 更改为应有的内容。由于这只是在黑暗中解决问题，这可能会或可能不会起作用，但这是我最好的猜测。

>>> import csv
>>> spamWriter = csv.writer(open('eggs.csv', 'w'), lineterminator='\n')
>>> spamWriter.writerow(['Spam'] * 5 + ['Baked Beans'])
>>> spamWriter.writerow(['Spam', 'Lovely Spam', 'Wonderful Spam'])

Answer 5

自最初的问题以来的十年中，许多其他答案已经过时了。对于Python3，答案就在documentation：

如果 csvfile 是一个文件对象，应该用newline=''打开它

footnote有更详细的解释：

如果未指定 newline=''，则嵌入在引用字段中的换行符将无法正确解释，并且在使用 \r\n linendings on write 的平台上将添加额外的 \r。指定 newline='' 应该始终是安全的，因为 csv 模块自己（通用）换行处理。

Answer 6

我正在写这个答案w.r.t。到 python 3，因为我最初遇到了同样的问题。

我应该使用 PySerial 从 arduino 获取数据，并将它们写入 .csv 文件。在我的案例中，每次阅读都以'\r\n' 结尾，因此换行符总是分隔每一行。

就我而言，newline='' 选项不起作用。因为它显示了一些错误，例如：

with open('op.csv', 'a',newline=' ') as csv_file:

ValueError: illegal newline value: ''

所以他们似乎不接受这里省略换行符。

在这里只看到一个答案，我在 writer 对象中提到了行终止符，例如，

writer = csv.writer(csv_file, delimiter=' ',lineterminator='\r')

这对我来说可以跳过额外的换行符。

Answer 7

使用下面定义的方法将数据写入 CSV 文件。

open('outputFile.csv', 'a',newline='')

只需在open 方法中添加一个额外的newline='' 参数即可：

def writePhoneSpecsToCSV():
    rowData=["field1", "field2"]
    with open('outputFile.csv', 'a',newline='') as csv_file:
        writer = csv.writer(csv_file)
        writer.writerow(rowData)

这将写入 CSV 行而不创建其他行！

Answer 8

with open(destPath+'\\'+csvXML, 'a+') as csvFile:
    writer = csv.writer(csvFile, delimiter=';', lineterminator='\r')
    writer.writerows(xmlList)

"lineterminator='\r'" 允许传递到下一行，两行之间没有空行。

Answer 9

借用this answer，似乎最干净的解决方案是使用io.TextIOWrapper。我设法为自己解决了这个问题，如下所示：

from io import TextIOWrapper

...

with open(filename, 'wb') as csvfile, TextIOWrapper(csvfile, encoding='utf-8', newline='') as wrapper:
    csvwriter = csv.writer(wrapper)
    for data_row in data:
        csvwriter.writerow(data_row)

上述答案与 Python 2 不兼容。为了兼容，我想只需将所有编写逻辑包装在 if 块中：

if sys.version_info < (3,):
    # Python 2 way of handling CSVs
else:
    # The above logic

Answer 10

在使用 Python 3 时，可以通过使用 codecs 模块来避免空行。如文档中所述，文件以二进制模式打开，因此不需要更改换行符 kwarg。我最近遇到了同样的问题，这对我有用：

with codecs.open( csv_file,  mode='w', encoding='utf-8') as out_csv:
     csv_out_file = csv.DictWriter(out_csv)