scrapy crawl MySpider -o items.json 每行输出一个 json 对象

Question

这是我得到的（不是有效的 json 对象）：

{"id": 1, "name": John}
{"id": 2, "name": Tom}

这是我想要得到的（有效的 json 对象）：

[{"id": 1, "name": John},
{"id": 2, "name": Tom}]

我希望能够直接使用 scrapy 的命令行工具（抓取）来完成。

Answer 1

您需要使用JsonItemExporter 而不是JsonLinesItemExporter。但是请注意，JsonLines 导出器更适合大型输出文件，因为您可以将文件解析为流。