【问题标题】:How to build a website with multi level data processing [closed]如何构建具有多级数据处理的网站 [关闭]
【发布时间】:2021-09-06 14:17:52
【问题描述】:

我想建立一个站点,其工作是从一个站点获取数据并将其放入另一个站点并获取结果,然后将结果输入另一个站点,然后在我的站点上显示该结果是否可以这样做?

【问题讨论】:

  • 可以通过编程方式打开和控制浏览器(如果您要使用的网站不提供真正的 API)。这是使用puppeteerplaywright 在JavaScript 中最简单的(恕我直言),但您可以使用selenium 使用大多数语言
  • 您使用 API 来正确执行此操作,而不是网站抓取。

标签: python web web-scraping


【解决方案1】:

在 python 中,您可以使用 selenium webdriver 捕获网站数据并使用 bs4 提取 html。 提取信息后,您可以创建将数据发送到其他站点的例程。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2013-10-17
    • 2021-09-01
    • 1970-01-01
    相关资源
    最近更新 更多