数据刮板：div标签的内容为空（？？）

Question

我正在抓取网站以获取数字的数据。这个数字每隔一秒就会动态变化，但经过检查，这个数字会显示出来。我只需要捕获该数字，但包含它的 div 包装器，它不返回任何值。我错过了什么？ （请放轻松，因为我对 Python 和数据抓取还很陌生）。

我有一些代码可以运行并返回应该包含我想要的数据的 html 片段，但不高兴，div 包装器没有返回任何值。

import requests
from bs4 import BeautifulSoup


r = requests.get('https://deuda-publica-espana.com')

deuda = BeautifulSoup(r.text, 'html.parser')
deuda = deuda.findAll('div', {'id': 'contador_PDEH'})

print(deuda)

我没有收到任何错误，我只是收到 [<div class="contador_xl contador_verde" id="contador_PDEH"></div>] 没有任何价值！

Answer 1

确实，使用硒很容易。我怀疑有一个运行计数器的 js 脚本提供数字，这就是为什么你无法用你的方法找到它（如 cmets 中所述）

from selenium import webdriver

d = webdriver.Chrome(r'C:\Users\User\Documents\chromedriver.exe')
d.get('https://deuda-publica-espana.com/')
print(d.find_element_by_id('contador_PDEH').text)
d.quit()