【发布时间】:2013-01-02 10:23:59
【问题描述】:
这是我的总体思路:在多个销售网站(例如 ebay)中搜索以找到 ipad 2 在上个月的平均价格。
我只想要一些指导来做这样的事情。语言可以是PHP或Python,可以使用开源项目。
问题是这样的系统至少需要一些自定义参数,例如日期间隔和对象名称。
那么我需要为每个网站定制一个爬虫吗?
如何将价值与产品联系起来?
我在使用这些销售网站时可能会遇到哪些问题?
嗯,我真的需要一些关于如何正确执行类似操作的建议。
【问题讨论】:
-
尝试编写爬虫并然后询问您是否有特定问题。另外,我会使用 Ebay API 而不是抓取 Ebay。
-
@Blender ebay 只是一个例子。我需要一个总体思路,现阶段我没有具体问题。
-
那么你的问题是什么?如果您倾向于使用 Python,请查看 Scrapy。
-
@Blender 来自有类似经验的人的一些建议。
标签: php python web-crawler