Python：csv到pickle表示，回到csv文件内容混乱

Question

我正在尝试腌制一个 csv 文件，然后将其腌制表示转回 csv 文件。

这是我想出的代码：

from pathlib import Path
import pickle, csv

csvFilePath = Path('/path/to/file.csv')

pathToSaveTo = Path('/path/to/newFile.csv')

csvFile = open(csvFilePath, 'r')
f = csvFile.read() 
csvFile.close() 

f_pickled = pickle.dumps(f) 


f_unpickled = pickle.loads(f_pickled) 

#save unpickled csv file
new_csvFile = open(pathToSaveTo, 'w')
csvWriter = csv.writer(new_csvFile)
csvWriter.writerow(f_unpickled)
new_csvFile.close()

newFile.csv 已创建，但其内容存在两个问题：

1. 现在每个字符之间都有一个逗号。
2. 现在每行后面都有一对引号。

我需要对我的代码进行哪些更改才能获得 file.csv 的精确副本？

Answer 1

问题是你正在读取文件的原始文本，f = csvFile.read() 然后，在写入时，你正在输入数据，这是一个单一的文本块，全部在一个字符串中，虽然是一个 CSV @ 987654323@ 对象。 CSV writer 会将字符串视为可迭代，并将每个可迭代元素写入 CSV 单元格。然后，第二行没有数据，过程结束。

您执行的泡菜dumps 和loads 只是一个无操作：那里什么都没有发生，如果有任何问题，那可能是由于您传递给@的对象中有一些不可腌制的对象引用987654327@：当loads 被调用时，你会得到一个异常，并且没有不同的数据。

现在，不告诉你为什么要这样做，以及你为数据计划了哪些中间步骤，很难告诉你：你正在执行两个非操作：读取文件，酸洗和解开它的内容，并将这些内容写回磁盘。

您何时需要将这些数据结构化为行或 CSV 单元格？只需在需要的地方应用适当的转换，就完成了。

如果您希望整个“什么都不做”循环通过实际将 CSV 数据分隔到 Python 中的不同元素中，您可以执行：

from pathlib import Path
import pickle, csv

csvFilePath = Path('file.csv')

pathToSaveTo = Path('newFile.csv')

data = list(csv.reader(open(csvFilePath))) 
# ^consumes all iterations of the reader: each iteration is a row, composed of a list where each cell value is a list elemnt
pickled_data = pickle.dumps(data)
restored_data = pickle.loads(pickled_data)
csv.writer(open(pathToSaveTo, "wt")).writerows(restored_data)

认为在这个 sn-p 中数据是通过 csv.reader 读取的，而不是直接读取的。将其包装在列表调用中会导致在列表项中读取和转换所有行 - 因为阅读器是一个惰性迭代器（否则它不会是可挑选的，因为它依赖于其状态的属性之一是打开文件）

Answer 2

我认为问题在于您尝试编写 CSV 文件的方式，酸洗和解酸都很好。如果将 f 与 f_unpickled 进行比较：

if f==f_unpickled:
    print("Same")

这是在我的情况下打印的。如果你打印类型，你会看到有两个字符串。

更好的选择是遵循document style 并一次写入每一行，而不是将整个字符串包含新行。像这样的：

from pathlib import Path
import pickle, csv

csvFilePath = Path('file.csv')

pathToSaveTo = Path('newFile.csv')

rows = []
csvFile = open(csvFilePath, 'r')
with open(csvFilePath, 'r') as file:
    reader = csv.reader(file)
    for row in reader:
        rows.append(row)

# pickle and unpickle        
rows_pickled = pickle.dumps(rows) 
rows_unpickled = pickle.loads(rows_pickled) 
if rows==rows_unpickled:
    print("Same")

#save unpickled csv file
with open(pathToSaveTo, 'w', newline='') as csvfile:
    csvWriter = csv.writer(csvfile)
    for row in rows_unpickled:
        csvWriter.writerow(row)

这在我测试时有效——尽管需要更多地使用行分隔符才能得到最后没有空行。