【发布时间】:2011-03-18 10:01:09
【问题描述】:
我真的需要找到一种可靠的方法来在本地存储网页,以及它的所有依赖项,例如html、css 样式表、javascript 等...
python 库会很棒,CLI 也会很棒。这种类型的应用程序/库也会有一个标准化的名称吗?
大家有什么建议吗? =)
【问题讨论】:
标签: python html linux caching screen-scraping
我真的需要找到一种可靠的方法来在本地存储网页,以及它的所有依赖项,例如html、css 样式表、javascript 等...
python 库会很棒,CLI 也会很棒。这种类型的应用程序/库也会有一个标准化的名称吗?
大家有什么建议吗? =)
【问题讨论】:
标签: python html linux caching screen-scraping
我过去使用HTTrack 效果很好(适用于 Windows、Linux 和 OS X)。它有一个C API,还有一个third-party Python wrapper 可用。
【讨论】:
你可以试试Scrapy,它相当简单高效: 它不仅仅是一个 python 库......
【讨论】: