爬虫小项目分享(微博关键词搜索爬虫、微博爬虫、链家房产爬虫、新浪新闻爬虫、腾讯招聘爬虫、招投标爬虫)

分享下工作中曾经的爬虫小项目，现不保证完全可用，仅做参考。

爬虫合集github地址：https://github.com/xiaoxiong74/Spiders

主要是基于scrapy或scrapy-redis框架进行数据爬虫

大体框架：

爬虫数据的应用：