使用 BeautifulSoup 从网站获取表格

Question

使用 Python，我正在尝试抓取网站并尝试获取一些值。在这种情况下，我想抢一张桌子。这是有问题的具体网站：

http://wotvffbe.gamea.co/c/5vdp3v91

当试图抓取它时，我试图在数据表中抓取这些值：

我正在使用 BeautifulSoup 筛选值。我想要一种方法来抓取它们，以便通过某种形式的参考来发现它们。我之前能够获取这些值，但是当移动到下一个站点时，它们不在同一个位置。因此，我想要一种通过参考而不是位置来发现它的方法。

感谢您的意见。

另外，如果您想测试其他网站，我正在测试以下网站：

http://wotvffbe.gamea.co/c/v89gxxuy

http://wotvffbe.gamea.co/c/yhb5ucqz

http://wotvffbe.gamea.co/c/yju5zfhe

Answer 1

import requests
from bs4 import BeautifulSoup

url = 'http://wotvffbe.gamea.co/c/5vdp3v91'
soup = BeautifulSoup(requests.get(url).content, 'html.parser')

table = soup.select_one('th:contains("Cost")').find_parent('table')
d = dict([(th.text, td.text) for th, td in zip(table.select('th'), table.select('td'))])

# pretty print it to screen:
from pprint import pprint
pprint(d)

打印：

{'AP': '110',
 'Attack': '225',
 'Cost': '80',
 'Dexterity': '168',
 'HP': '2079',
 'Jump': '2',
 'Luck': '149',
 'Magic ': '64',
 'Move': '3',
 'Range': '1',
 'Speed': '62',
 'TP': '117'}