如何正确地从 reddit 抓取 json 响应？

Question

我正在尝试将下面链接的 json 中的所有“作者”条目保存到一个列表中，但是对于 python 来说是非常新的。有人可以指出我正确的方向吗？

json：https://codebeautify.org/jsonviewer/cb0d0a91

试图抓取一个 reddit 线程：

import requests
import json

url ="https://www.reddit.com/r/easternshoremd/comments/72u501/going_to_be_in_the_easton_area_for_work_next_week.json"

r = requests.get(url, headers={'User-agent': 'Chrome'})
d = r.json()

scrapedids = []

for child in d['data']['children']:
    scrapedids.append(child['data']['author'])

print (scrapedids)

如果我将 url 从 reddit 帖子切换到 subreddit，那么它就可以工作。例如，如果我设置

url = ("https://www.reddit.com/r/easternshoremd.json")

我认为问题在于我对 json 的目录/树（不管它叫什么）缺乏了解。我已经挂了几个小时，感谢任何帮助。

错误：

Traceback（最近一次调用最后一次）： 文件“/home/usr/PycharmProjects/untitled/delete.py”，第 14 行，在 对于 d['data']['children'] 中的孩子： TypeError: 列表索引必须是整数或切片，而不是 str

Answer 1

您包含一个指向 JSON 的链接，这很好。它表明根是一个数组。

因此您的代码应该看起来更像：

import requests
import json

url ="https://www.reddit.com/r/easternshoremd/comments/72u501/going_to_be_in_the_easton_area_for_work_next_week.json"

r = requests.get(url, headers={'User-agent': 'Chrome'})
listings = r.json()

scrapedids = []

for listing in listings:
    for child in listing['data']['children']:
        scrapedids.append(child['data']['author'])

print (scrapedids)

请注意，我将d 重命名为listings，这与kind 属性（'listing'）有关。