【问题标题】:How to get all pipelines activities in a single call in Azure data factory如何在 Azure 数据工厂中的一次调用中获取所有管道活动
【发布时间】:2021-11-23 01:48:36
【问题描述】:

如果有人能真正帮助我,我将不胜感激,因为我已经为此苦苦挣扎了将近 4 周。我在这里看到的例子很少,但与我的要求不同

我的 azure 数据工厂中有大约 120 个管道,并且我已经设法将所有管道运行信息以 parquet 格式存储在我们的 ADSL gen 2 中,但是我需要将每个管道中的活动存储在另一个 parquet 中文件,以便我们可以使用 PBI 访问信息。每个管道都有大约 5 个活动,我想捕获这些活动。

“获取管道运行”活动获取所有管道运行,包括 pipelineRunId,我想将每个 pipelinerunId 传递给“获取管道活动”,以便它可以列出每个管道中的所有活动。

非常感谢

data factory image

【问题讨论】:

    标签: azure-pipelines azure-data-factory-2


    【解决方案1】:

    这是一个巧合,我实际上正在研究如何自己做到这一点。我想将嵌套管道运行链接到父 Activity,尽管我能够将我的管道存储在 sql 数据库的表中。

    【讨论】:

    • 这不像是一个答案。请在以后将此类回复作为评论发布。如果您提出您的数据库解决方案作为答案,那么您应该这样说,并提供有关其他人如何实施您的解决方案的详细信息。
    • 我找到了解决方案...
    猜你喜欢
    • 2021-12-25
    • 2018-05-12
    • 1970-01-01
    • 2021-11-30
    • 2018-12-06
    • 1970-01-01
    • 2019-04-24
    • 2022-01-17
    • 1970-01-01
    相关资源
    最近更新 更多