【问题标题】:how to exclude files with certain prefix in azure data factory pipeline while copying the data复制数据时如何在 azure 数据工厂管道中排除具有特定前缀的文件
【发布时间】:2021-11-14 06:17:46
【问题描述】:

我想在将 .mp4 文件从 Azure 存储 (blob) 复制到 Sftp 时排除它。以下是我的来源设置

【问题讨论】:

    标签: azure azure-data-factory azure-data-factory-2 azure-data-factory-pipeline azure-adf


    【解决方案1】:

    您可以使用 GetMetadata 活动来获取文件夹中所有文件的列表,然后为 .mp4 文件过滤掉该数组。 使用这个过滤掉的输出作为每个活动的输入并遍历每个文件

    【讨论】:

    • 我们不能直接使用通配符路径或前缀通过表达式和函数吗?
    • 我正在寻找最优化的解决方案。你知道我们是否可以在通配符文件名中使用多个模式/前缀吗?
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2019-07-29
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2019-11-22
    相关资源
    最近更新 更多