如何使用 python 抓取任何网站的“下载页面”[关闭]

Question

我想使用 python 抓取任何站点的下载页面以提取有关版本的信息及其下载链接。 我正在学习python，想用beautifulsoup 来做，但是这些页面非常复杂，而且看起来很难找到这些东西。 提前致谢

Answer 1

欢迎来到堆栈溢出！ --我猜你的意思是“scrape”，因为“scrap”的意思是“扔掉”。

首先，您必须使用 urllib2 来创建要抓取的页面的文件对象。阅读this 了解如何操作。

然后，您必须通过检查页面的 html 内容来确定要从页面本身获取哪些信息。

最后，您将文件对象传递给美丽汤的解析器，并浏览 HTML 以返回您想要获取的信息。

为了将来参考，BeautifulSoup 有 beautiful 文档。如果你想精通编程，就必须学习如何阅读文档——从这里开始真的只会变得更难。