在 Azure 数据工厂中使用筛选器活动筛选数据的问题答案

【问题标题】：Issue with Filtering data With Filter Activity in Azure Data Factory在 Azure 数据工厂中使用筛选器活动筛选数据的问题
【发布时间】：2021-12-03 08:09:15
【问题描述】：

我正在尝试使用过滤器活动过滤以下文件夹，并仅从整个 blob 容器中选择最新日期。

文件夹名称示例：2020-04-21、2021-08-11、2020-01-07

我需要选择2021-08-11

我正在使用 Get metadata (ChildItems) 活动来获取文件夹名称，并使用以下逻辑在过滤器活动中过滤它们。

@greater(max(array(int(replace(item().name, '-', '')))),0)

但是在过滤之后，我得到了所有文件夹。我知道我的逻辑有问题，但我是 ADF 的初学者

【问题讨论】：

【解决方案1】：

您可以首先获取元数据以获取完整的文件夹列表，使用 ForEach 查找最新的文件夹并将文件夹名称分配给变量，最后使用变量复制数据，该变量现在存储您的最新文件夹名称。

父管道：

GetMetadata 的输出：

ForEach 中使用的动态内容：@activity('Get Metadata1').output.childItems

forEach 仅包含 1 个 if 条件活动：

使用的表达方式与您的相似：@greater(int(replace(item().name, '-', '')), int(replace(variables('latestFolder'),'-','')))

在真正的情况下，只有变量赋值：

最后使用变量，它现在包含最新文件夹的文件夹名称，在复制活动：

【讨论】：