【发布时间】:2022-08-30 17:57:15
【问题描述】:
我希望对 databricks 笔记本的查询结果是管道的成功或失败条件,以重新处理例如 azure 数据工厂中的“复制数据”。
例如: 如果 x = 1,则终止管道,如果不是,则重新处理(限制为 3 次尝试)。
最好的方法是什么?
【问题讨论】:
-
首先考虑是否可以直接在 ADF 中进行评估。如果没有,您的第一个挑战是从笔记本执行中获得结果。也许你可以使用这个过于冗长的指南来解决它。 azurelib.com/output-from-databricks-to-adf
标签: azure-data-factory azure-databricks azure-data-factory-pipeline