Web Scraping - 无法获取文本值

Question

我正在尝试通过 python 抓取，已经尝试过：

• bs4，硒，请求，氦。 [包括类、标签、xpath 等]..

虽然我从来没有遇到过这种问题，但也许我做错了什么。 我就是不能接受这个文本值：G120-5，如下图所示：

链接：https://www.kavak.com/br/carros-usados-100550

如果有人可以做到，请告诉我。在此先感谢:)

Answer 1

您看到的数据是从外部 URL 加载的。你可以使用requests模块来模拟它：

import json
import requests


# url = "https://www.kavak.com/br/carros-usados-100550"
car_id = "100550"  # <-- this is the id from URL
api_url = (
    f"https://api.kavak.services/services-common/inventory/{car_id}/dynamic"
)

headers = {
    "kavak-country-id": "76",
    "kavak-region-id": "4",
    "kavak-subsidiary-id": "3",
}

data = requests.get(api_url, headers=headers).json()
# uncomment to print all data:
# print(json.dumps(data, indent=4))

print(data["data"]["coordinate"])

打印：

G120-5