【发布时间】:2015-04-29 09:53:19
【问题描述】:
我有一个包含链接 (http://en.wikipedia.org/wiki/Lists_of_countries_and_territories) 的维基百科页面。我想浏览所有这些链接,然后检索列出的国家/地区列表。
我已经能够使用 BeautifulSoup 检索所有链接,并且可以通过链接并使用 beautifulsoup 来完成它,但是我想将这个刮板用于各种事情,并且想知道是否有办法做到这一点使用 wikipedia API 更轻松、更快捷。
【问题讨论】:
-
考虑使用维基百科转储,或 DBpedia(P.S. 抓取不是数据挖掘)
标签: python api web-scraping screen-scraping wikipedia