【发布时间】:2012-11-11 22:21:52
【问题描述】:
我想使用 Scrapy 从网站上获取一些数据,但我不想用我的笔记本电脑来做。
是否可以将其作为 heroku 应用程序运行?在远程服务器上运行 scrapy spider 还有哪些其他选项?
谢谢
【问题讨论】:
标签: python heroku screen-scraping scrapy
我想使用 Scrapy 从网站上获取一些数据,但我不想用我的笔记本电脑来做。
是否可以将其作为 heroku 应用程序运行?在远程服务器上运行 scrapy spider 还有哪些其他选项?
谢谢
【问题讨论】:
标签: python heroku screen-scraping scrapy
可以使用Scrapy on Heroku。其他选项包括在远程服务器上设置Scrapyd,或使用Scrapy Cloud。
【讨论】:
您可以使用scrapy-heroku 在heroku 上运行Scrapyd 服务器!没问题。
【讨论】: