今天我们来了解一下MySQL ,以及如何将scrapy框架爬取的数据放入到MySQL中

1,首先,安装关于MySQL的包及相关配置

python的mysql安装及内容

在成功安装后,在终端输入你想要创建的项目 及该项目所需的域名

scrapy genspider **(名字) **(域名)

2,内容

执行完上一步之后该文件夹里会有如下内容

python的mysql安装及内容

每一个文件都有它的内容作用!

   关于爬虫文件介绍

python的mysql安装及内容

 3,两种运行方式

1,终端输入

python的mysql安装及内容

2, 通过文件运行爬虫

python的mysql安装及内容

关于下载及存储 需要在setting,pipeline里面修改,选择存储方式,类型(表格,txt,json,数据库) ,根据自身要求存储

相关文章:

  • 2021-11-22
  • 2022-12-23
  • 2022-12-23
  • 2021-04-12
  • 2021-08-17
  • 2021-05-23
  • 2021-06-09
  • 2022-03-08
猜你喜欢
  • 2021-12-20
  • 2021-11-22
  • 2021-11-24
  • 2021-07-22
  • 2022-12-23
  • 2021-11-22
  • 2021-07-23
相关资源
相似解决方案