【发布时间】：2011-08-28 09:32:03
【问题描述】：
我想写一个支持cookies存储操作和会话的爬虫。 java无头浏览器有两种不同的实现。 HtmlUnit 对 javascript 和 html 解析有更好的支持。但是是否有任何理由使用 HttpUnit 来提高爬虫的性能？
【问题讨论】：
-
cockies LOL :)) 小心错字
-
我怀疑你会发现任何性能比较。那些没有针对速度进行优化：他们的目标主要是实现不需要顶级性能的单元测试。自己衡量，但瓶颈肯定是网络，而不是Java代码。
-
我将 HTMLUnit 用于我的应用程序，我基本上通过禁用 CSS、从源代码中删除 java 小程序和 ActiveX 来加速我的实现。