【发布时间】:2020-09-16 14:30:04
【问题描述】:
我正在尝试使用管道中的数据流将数据从 Blob 复制到 Azure SQL。 数据文件为 csv 格式,标题位于 csv 文件的第 4 行。 我想使用 csv 数据文件中可用的标题。
我想循环浏览所有文件并上传数据。
谢谢
【问题讨论】:
-
根据我的经验,恐怕我们可以做到。
-
是否需要Header上方的3行?
-
不要使用跳线。您将丢失前 3 行。添加一个行计数器(Surrogate Key 或 Window w/RowNumber),然后使用过滤器转换过滤掉标题行。
-
我有一个 csv,它有 5 个额外的行,然后标题位于第 6 行。所以要阅读这个文件,我必须先跳过 5 行,然后使用第 6 行作为标题。这就是我卡住的地方。
标签: azure-data-factory azure-data-factory-2 azure-blob-storage azure-data-flow