【发布时间】:2022-01-03 14:05:47
【问题描述】:
我正在尝试使用Azure Synapse Analytics pipelines将销售数据加载到数据库中,策略如下(场景编排):
- 将学生数据加载到学生表中
- 将学生的班级信息加载到 StudentClasses 表中。在这个数据流中,我需要将数据与学生表连接(显然,关于学生的新数据必须在这个连接步骤加载到学生)
我可以在同一个数据流中使用 Sink 排序这两个进程吗?或者接收器排序没有定义源读取排序? (即源码读取和转换是并行进行的,只有写入是按顺序排列的?
source3 和 sink1 是同一张表。我想要的是首先填充 sink1,然后将它用于 source 2 加入它。这可以使用接收器排序来实现吗?或者无论接收器排序如何,source3 都将为空?
【问题讨论】:
-
你的源类型或数据集是什么
标签: azure-data-factory pipeline azure-synapse