【问题标题】:Get custom metadata for blob files in Azure data factory在 Azure 数据工厂中获取 Blob 文件的自定义元数据
【发布时间】:2021-11-04 02:33:31
【问题描述】:
我在 Blob 存储的一个文件夹中有几个 100 个文件。每个文件都有自定义元数据(字典类型)。因此,在遍历所有文件时,我需要获取每个文件的元数据。
那么如何阅读这些细节。我尝试使用 GetMetadata 功能,该功能具有一些硬编码功能,例如存在、文件名、lastedit 等。但我需要获取这些文件的自定义元数据。
请分享一些想法。
【问题讨论】:
标签:
azure
azure-data-factory
【解决方案1】:
@桑迪普
我假设您希望通过 Get Meta data Feature 获取用户定义的元数据。
很遗憾,目前这是不可能的 - 活动只返回预定义的 Metada 集。
支持的元数据列表已记录在here。
解决方法
我能想到的解决方法之一是利用 ADF 中的 Web Activity 并点击 REST API Get Blob Properties
Get blob properties API 返回 blob 的所有用户定义元数据、标准 HTTP 属性和系统属性。