转换为数据框，初学者问题答案

【问题标题】：Converting to dataframe, beginner question转换为数据框，初学者问题
【发布时间】：2021-12-05 12:56:01
【问题描述】：

我有一个看起来像这样的数据

    my_data[:5]

    [{'key': ['Aaliyah', '2', '2016'], 'values': ['10']},
     {'key': ['Aaliyah', '2', '2017'], 'values': ['26']},
     {'key': ['Aaliyah', '2', '2018'], 'values': ['21']},
     {'key': ['Aaliyah', '2', '2019'], 'values': ['26']},
     {'key': ['Aaliyah', '2', '2020'], 'values': ['15']}]

键代表姓名、性别和年份。值为数字。我无法生成包含名称、性别、年份和数字列的数据框。

你能帮帮我吗？

【问题讨论】：

这能回答你的问题吗？ JSON to pandas DataFrame

标签： python json python-3.x pandas dataframe

【解决方案1】：

您可以迭代 list 或 dict。获取所有值，然后使用 chain 获取列表列表并将其转换为 DataFrame，如下所示：

>>> from itertools import chain

>>> table = [chain.from_iterable(m.values()) for m in my_data]

>>> pd.DataFrame(table, columns=['name', 'gender', 'year', 'number'])
     name   gender  year    number
0   Aaliyah 2       2016    10
1   Aaliyah 2       2017    26
2   Aaliyah 2       2018    21
3   Aaliyah 2       2019    26
4   Aaliyah 2       2020    15



# for more explanation
>>> [list(chain.from_iterable(m.values())) for m in my_data]
[['Aaliyah', '2', '2016', '10'],
 ['Aaliyah', '2', '2017', '26'],
 ['Aaliyah', '2', '2018', '21'],
 ['Aaliyah', '2', '2019', '26'],
 ['Aaliyah', '2', '2020', '15']]

【讨论】：

如果您使用生成器，最好不要分配中间列表，您将失去生成的好处;)
@mozway 谢谢MAN 我先写是因为我需要这个来解释

【解决方案2】：

这是一种使用生成器的方法：

from itertools import chain
pd.DataFrame.from_records((dict(zip(['name', 'gender', 'year', 'number'],
                                    chain(*e.values())))
                           for e in my_data))

没有迭代工具：

pd.DataFrame(((E:=list(e.values()))[0]+E[1] for e in my_data),
             columns=['name', 'gender', 'year', 'number'])

输出：

      name gender  year number
0  Aaliyah      2  2016     10
1  Aaliyah      2  2017     26
2  Aaliyah      2  2018     21
3  Aaliyah      2  2019     26
4  Aaliyah      2  2020     15

【讨论】：