【发布时间】：2011-12-12 12:14:58
【问题描述】：
什么是最好的开源网络爬虫工具，用 Java 编写。
【问题讨论】：
标签： java web-crawler
【发布时间】：2011-12-12 12:14:58
【问题描述】：
试试crawler4j。您只需要实现一个简单的接口来控制要访问的 URL 以及如何处理每个已爬取的页面。
【讨论】：
-
我在使用此爬虫程序爬取 HTTPS 网站时遇到问题（“网站无法响应”，而它在浏览器中正常打开等）