【问题标题】:selecting multiple dropdown menus with import.io使用 import.io 选择多个下拉菜单
【发布时间】:2015-08-20 14:55:54
【问题描述】:

我正在尝试使用import.io 爬取电子商务网站并收集各种定价信息。但是,每种产品的价格是由用户设置的众多下拉菜单决定的。

网站链接:http://www.saxoprint.co.uk/shop/brochures

我需要爬虫浏览所有不同的选项并收集与该产品相关的所有可能的定价组合。我最初尝试使用 Chrome 的网络爬虫插件,但发现此扩展程序不支持一个页面内的多次点击操作。

我认为 import.io 可以做到这一点,但我可能错了。有谁知道如何收集这些数据,即使它是 import.io 的替代品?

谢谢...

【问题讨论】:

    标签: web-crawler import.io


    【解决方案1】:

    不幸的是,使用 import.io 工具无法浏览所有不同的选项。通过导入,您需要手动将所有这些不同的选项关联为输入。我通过编写一个可以循环遍历所有可能选项并写出数据的 python 脚本在类似的电子商务网站上取得了成功。

    谢谢,
    梅格

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 2021-05-13
      • 2015-11-03
      • 1970-01-01
      • 2018-04-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多