找评论所在真实url:有了前面爬搜狗图片的经验,面对找资料的url这件事,找他的速度是比第一次快了不少。首先进宝贝页面,如图

Python爬虫 获得淘宝商品评论

发现评论与搜狗图片类似,均为动态刷新。因此,F12(开发者选项)>>Notework>>F5(刷新)>>feedRateList(文件名)>>Headers>>复制Request URL  

去除不必要的字段,获得需要的资料(评论)所在url= https://rate.taobao.com/feedRateList.htm?auctionNumId=39595400262¤tPageNum=1

猜测url地址为商品id,PageNum为评论的所在页数。因此要把所有页的评论遍历一遍。则应取Num的值递增访问,统计评论,直至输出的评论数等于总评为止,Num不再叠加,当然叠加后肯定是404喽。

愉快的代码时间:

Python爬虫 获得淘宝商品评论

来来来,看一下效果:

Python爬虫 获得淘宝商品评论

相关文章:

  • 2021-04-20
  • 2021-09-13
  • 2021-10-05
  • 2021-12-04
  • 2022-01-30
  • 2021-10-17
  • 2021-09-02
猜你喜欢
  • 2021-05-29
  • 2021-05-12
  • 2021-10-12
  • 2021-07-22
  • 2022-12-23
相关资源
相似解决方案