【发布时间】:2015-08-20 14:55:54
【问题描述】:
我正在尝试使用import.io 爬取电子商务网站并收集各种定价信息。但是,每种产品的价格是由用户设置的众多下拉菜单决定的。
网站链接:http://www.saxoprint.co.uk/shop/brochures
我需要爬虫浏览所有不同的选项并收集与该产品相关的所有可能的定价组合。我最初尝试使用 Chrome 的网络爬虫插件,但发现此扩展程序不支持一个页面内的多次点击操作。
我认为 import.io 可以做到这一点,但我可能错了。有谁知道如何收集这些数据,即使它是 import.io 的替代品?
谢谢...
【问题讨论】:
标签: web-crawler import.io