网上搜出来的文章比较多,但是没有一篇能够按照操作最后配置成功的;同时感觉时间长了也会遗忘,所以还是记录一下吧。

1、安装Python和Scrapy

2、编写第一个爬虫

到这里,我已经可以在根目录通过执行scrapy crawl dmoz查看结果了。但是感觉每次都用命令行执行麻烦,同时又想通过调试查看流程和内存数据。于是就用PyCharm加载项目,做了以下配置:

3、python使用PyCharm调试Scrapy程序

4、python使用PyCharm调试Scrapy程序

重点是第4步,按照截图配置好后,点击启动或者调试按钮,程序就能正常跑起来了python使用PyCharm调试Scrapy程序

相关文章:

  • 2021-09-16
  • 2022-12-23
  • 2021-11-28
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
猜你喜欢
  • 2022-02-27
  • 2022-02-27
  • 2021-12-27
  • 2022-12-23
  • 2021-07-08
  • 2021-04-01
相关资源
相似解决方案