第一步:

先找到新闻资讯存在的那个非同步存取的链接,该链接一般位在js那个分类下。

python抓取新浪新闻的分页连结

然后把这个链接给requests 让它存取内部的资料。

取到之后你会发现,这个内容前后两边有保护层,即一个“(”和 “);”,这个时候可以用lstrip和rstrip去截掉这些多余的字符串。

最后返回的就是一个json资料,通过json.loads将它赋给一个字典。

早在之前就已经发现,这个字典是分层次的,首先是['result'],然后才是['data'],而我们需要的链接就在data下的['url']里面

python抓取新浪新闻的分页连结

python抓取新浪新闻的分页连结


相关文章:

  • 2022-12-23
  • 2022-12-23
  • 2021-08-18
  • 2022-12-23
  • 2022-12-23
  • 2021-06-06
  • 2021-11-24
  • 2021-09-30
猜你喜欢
  • 2021-09-14
  • 2021-06-23
  • 2021-12-10
  • 2022-12-23
  • 2021-11-17
  • 2022-12-23
相关资源
相似解决方案