如何获取数据工厂网络爬虫的底层链接答案

【问题标题】：How can I get the underlying link with Data factory web scraper如何获取数据工厂网络爬虫的底层链接
【发布时间】：2022-08-29 09:04:31
【问题描述】：

我在 Azure 数据工厂中制作了一个非常简单的管道，可以从网页中读取表格。

但是，其中一列包含链接。因此，数据工厂返回可见文本，但不返回与该文本关联的链接。是否可以配置网络爬虫返回链接？还是我需要像 Selenium 这样更复杂的框架？

我的源数据集是这个

{
"name": "SourceDataset_n4m",
"properties": {
    "linkedServiceName": {
        "referenceName": "PlayersTable",
        "type": "LinkedServiceReference"
    },
    "annotations": [],
    "type": "WebTable",
    "schema": [],
    "typeProperties": {
        "index": 1
    }
}
}

【问题讨论】：

标签： azure web-scraping azure-data-factory azure-data-factory-2 azure-data-factory-pipeline

【解决方案1】：

目前，无法在 ADF 中使用 Web Table 连接器。我建议在 Azure 数据工厂反馈论坛中提交功能请求 - https://feedback.azure.com/d365community/forum/1219ec2d-6c26-ec11-b6e6-000d3a4f032c

【讨论】：