以 Json 格式存储 API 数据

Question

我有一个 API，其中所有位置 ID 及其各自的信息（如（地址、纬度、经度）都存在。但是，如果我想获取其他额外属性，例如位置名称、位置区域、位置访问权限，那么我需要在 API 中将位置 id 作为参数一一提供，以获取它们各自的额外属性。

我已经写了下面的代码。但是下面代码的问题是数据进入控制台，我不知道如何在 json 中获取这些信息，然后将其转换为文本文件。

ids=location_id_df["id"] #stored location id in dataframe 

authorization =”####################### "

print("started")  
def test_api(url, authorization, rawfile,ids):

    for i in range(0,1000,50):
        for j in ids:
          #print(j)
          try:
              request = urllib.request.Request('https:….. /locations/{}'.format(j)+"? 
                                                                                  
                                      offset="+str(i),headers={'authorization':authorization})
             
               
              response = urllib.request.urlopen(request).read()
              print(response)
              
    
                
          except HTTPError as e:
              print(e)
              sys.exit(0)
              
        with open(rawfile + "_offset_" + str(i) + ".json", "wb") as json_download:
            json_download.write(response)
test_api(url, authorization, rawfile,ids)  

我需要像 json 一样获取响应

5182021_offset_0.json #contains some location id's with extra attribute data                                         
5182021_offset_50.json #contains some location id's with extra attribute data   
5182021_offset_100.json  #contains some location id's with extra attribute data   
........................  
.......................



     

Answer 1

这是您示例的简化版本，它查询返回 json 并将每个结果保存到文件的 api。

import urllib.request
import json

for i in range(2):
    responses = []
    for j in range(3):
        request = urllib.request.Request("https://www.boredapi.com/api/activity/")
        response = urllib.request.urlopen(request)
        if response.status == 200:
            try:
                response_bytes = response.read()
            finally:
                response.close()
            response_string = response_bytes.decode("utf8")
            response_data = json.loads(response_string)
            responses.append(response_data)

    file_name = "data-{}.json".format(i)
    with open(file_name, "w") as f:
        json.dump(responses, f)

我建议使用Requests 库，因为它的api 比urllib 更简单，并且被python 社区广泛使用。这是Requests 库的相同示例。

import requests
import json


for i in range(2):
    responses = []
    for j in range(3):
        response = requests.get("https://www.boredapi.com/api/activity/")
        if response.status_code == 200:
            response_data = response.json()
            responses.append(response_data)

    file_name = "data-{}.json".format(i)
    with open(file_name, "w") as f:
        json.dump(responses, f)