这个属于测试版,没有优化。
由于该网站响应时间较长,并且相邻两次访问时间间隔较短会被禁止访问,因此后期可以加上proxy和随机更换User-Agent提高访问效率。
除第一次访问网页外,访问新网页需携带前一已打开网页上的两个数据,可从提取获得。
访问镇区第一页和访问镇区下一页所携带的内容有所不同。
这只是获取所有项目的粗略信息,可通过网页提取到的详细信息和楼盘表继续访问项目详情和楼盘表详情,代码就不展示了。
相关文章:
这个属于测试版,没有优化。
由于该网站响应时间较长,并且相邻两次访问时间间隔较短会被禁止访问,因此后期可以加上proxy和随机更换User-Agent提高访问效率。
除第一次访问网页外,访问新网页需携带前一已打开网页上的两个数据,可从提取获得。
访问镇区第一页和访问镇区下一页所携带的内容有所不同。
这只是获取所有项目的粗略信息,可通过网页提取到的详细信息和楼盘表继续访问项目详情和楼盘表详情,代码就不展示了。
相关文章: