如何比较 json 和 CSV 文件

Question

我有一个用于一个服务请求的 json 有效负载。处理后，有效载荷（JSON）将存储在 S3 中，通过 Athena，我们可以以 CSV 格式下载这些数据。现在在实际场景中，有100多个字段。我想通过一些自动化脚本而不是手动来验证它们的价值。

假设我的示例负载类似于以下内容：

{
  "BOOK": {
    "serialno": "123",
    "author": "xyz",
    "yearofpublish": "2015",
    "price": "16"
  }, "Author": [
    {
      "isbn": "xxxxx", "title": "first", "publisher": "xyz", "year": "2020"
    }, {
      "isbn": "yyyy", "title": "second", "publisher": "zmy", "year": "2019"
    }
  ]
}

示例 csv 如下所示：

谁能帮我在 Python 上做这件事吗？也许是图书馆或字典？

Answer 1

看起来您只是想扁平化 JSON 结构。遍历“作者”列表是最容易的。由于 CSV 已重命名列，因此您需要某种方式来表示该映射。仅基于示例，这是可行的：

import json
fin=open(some_json_file, 'r')
j=json.load(fin)
result=[]
for author in j['Author']:
    val = {'book_serialno':       j['BOOK']['serialno'],
           'book_author':         j['BOOK']['author'],
           'book_yearofpublish':  j['BOOK']['yearofpublish'],
           'book_price':          j['BOOK']['price'],
           'author_isbn':         author['isbn'], 
           'author_title':        author['title'],
           'author_publisher':    author['publisher'],
           'author_year':         author['year']}
    result.append(val)

这是使用字典来显示数据点到新列名的映射。您也可以使用列表来侥幸逃脱。取决于您以后要如何使用它。要写入 CSV：

import csv
fout=open(some_csv_file, 'w')
writer=csv.writer(fout)
writer.writerow(result[0].keys())
writer.writerows(r.values() for r in result)

这会在第一行写入列名，然后是数据。如果您不想要列名，只需省略 writerow(...) 行。