TypeError: a bytes-like object is required, not 'str' – 在 Python 中保存 JSON 数据

Question

我从 twitter 获取 json 格式的数据并将其存储在一个文件中。

consumer_key = 'Consumer KEY'
consumer_secret = 'Secret'
access_token = 'Token'
access_secret = 'Access Secret'

auth = OAuthHandler(consumer_key, consumer_secret)

auth.set_access_token(access_token, access_secret)

api = tweepy.API(auth)

os.chdir('Path')
file = open('TwData.json','wb')

for status in tweepy.Cursor(api.home_timeline).items(15):
    simplejson.dump(status._json,file,sort_keys = True)
file.close

但我收到以下错误：

Traceback (most recent call last):
  File "<stdin>", line 2, in <module>
  File "/Users/abc/anaconda/lib/python3.6/json/__init__.py", line 180, in dump
    fp.write(chunk)
TypeError: a bytes-like object is required, not 'str'

Answer 1

不要存储单独的 json 对象。将每个附加到列表中，然后立即转储。

with open('TwData.json','w') as file:    
    data = []
    for status in tweepy.Cursor(api.home_timeline).items(15):
        data.append(status._json)

    simplejson.dump(data, file, sort_keys=True)

这里还应注意，如果要向其写入文本，则不应以二进制模式打开文件。

Answer 2

来自json.dump() documentation：

json 模块总是生成 str 对象，而不是 bytes 对象。所以fp.write()必须支持str输入。

您以二进制模式打开文件。不要那样做，从文件模式中删除b：

file = open('TwData.json','w')

最好使用绝对路径而不是更改工作目录，并且如果您将文件用作上下文管理器（使用with 语句），当块完成时它会自动为您关闭。这有助于避免错误，例如忘记实际调用 file.close() 方法。

如果你打算将多个 JSON 文档写入文件，至少在每个文档之间放置一个 换行符，使其成为JSON lines file；这是much easier to parse again 稍后：

with open('Path/TWData.json', 'w') as file:    
    for status in tweepy.Cursor(api.home_timeline).items(15):
        json.dump(status._json, file, sort_keys=True)
        file.write('\n')

或者，将所有内容放入顶级对象（如映射或列表）中，然后将该单个对象写入文件以创建有效的 JSON 文档。