在python中展平JSON数据框

Question

我提出了一个 API 请求，我收到了下面嵌套格式的 JSON（以及我所期望的）。

我不需要经常扁平化 JSON 数据，而当我这样做时，我只需使用 Json_normalize。 我尝试过使用json_normalize，但这次没有任何效果。

任何帮助将不胜感激。

澄清一下，一旦我提出请求，json 数据就会进入数据帧。这些字段应该成为列。 最终结果是具有以下列的表：id、field1、field 2 等。

#ACTUAL
[
    {
        "id": 1000,
        "tableName": {
            "": {
                "field1": null,
                "field2": null,
            }
        }
    },
{
        "id": 1001,
        "tableNameTwo": {
            "": {
                "field1": null,
                "field2": null,
            }
        }
    }

]


#EXPECTED
[
    {
         "id": 1000,
         "field1": null,
         "field2": null,
    },
{
         "id": 1001,
         "field1": null,
         "field1": null,
    },
...
]

Answer 1

更新：下面的代码可以为您工作。

注意：我已将您的输入数据从null 修改为None

list = [
    {
        "id": 1000,
        "tableName": {
            "": {
                "field1": None,
                "field2": None,
            }
        }
    },
{
        "id": 1001,
        "tableNameTwo": {
            "": {
                "field1": None,
                "field2": None,
            }
        }
    }

]

flatList = []
for i in list:
    tempDict = {}
    for key, value in i.items():
        if key.startswith('table'):
            for m, n in value[''].items():
                tempDict.update({m: n})
        else:
            tempDict.update({key:value})

    flatList.append(tempDict)

print(flatList)

输出：

[
  {
    'id': 1000,
    'field1': None,
    'field2': None
  },
  {
    'id': 1001,
    'field1': None,
    'field2': None
  }
]

如果代码有任何缺陷，贡献者请添加评论，答案可以更新。

Answer 2

扁平化 json 响应几乎总是不好的做法，例如，如果嵌套对象中有键重复（大多数情况下嵌套对象都有自己的 id），你怎么能解决这个冲突？

但是，如果此问题不是用于生产用途，而只是做一些功课等。您可以使用以下代码。我在您的示例中对其进行了测试：

map = [
    {
        "id": 1000,
        "tablename": {
            "": {
                "field1": None,
                "field2": None,
                "field3": None,
                "field4": None,
                "field5": None,
                "field6": None,
                "field7": None,
                "field8": None,
                "field9": None
            }
        }
    }
]
new_map = {}


def flat_json_object(obj):
    for k, v in obj.items():
        if type(v) is dict:
            flat_json_object(v)
        else:
            new_map[k] = v


def flat_json_array(array):
    for obj in array:
        flat_json_object(obj)


flat_json_array(map)

Answer 3

我会推荐以下内容：

import pandas as pd

your_list = [
    {
        "id": 1000,
        "tablename": {
            "tableZero": {
                "field0": None,
                "field1": None,
                "field2": None,
            }
        }
    }
]

df = pd.json_normalize(your_list, sep='_')

print(df.to_dict(orient='records')[0])

这将输出以下字典。

your_result = {
    "id": 1000,
    "tablename_tableZero_field0": None,
    "tablename_tableZero_field1": None,
    "tablename_tableZero_field2": None,
}