【问题标题】:How to query Azure databricks data on Azure datafactory?如何在 Azure datafactory 上查询 Azure databricks 数据?
【发布时间】:2021-03-12 10:06:39
【问题描述】:

我的源数据在 ADLS 中,其表格格式在 ADB 数据中。

现在我正在 ADF 管道中创建一个查找活动,我必须在其中对 ADB 中存在的表编写一个 SELECT 查询。

您能否分享您对如何实现此链接的建议?

【问题讨论】:

    标签: azure azure-data-factory azure-databricks


    【解决方案1】:

    查找活动中的查询属性接受表达式,而不是 SQL 语句。

    参考:https://docs.microsoft.com/en-us/azure/data-factory/control-flow-expression-language-functions

    您可以将源设置为存储过程,也可以使用 Copy 活动从查找结果中查询结果。

    在此处查看示例:https://docs.microsoft.com/en-us/azure/data-factory/control-flow-lookup-activity#pipeline

    【讨论】:

      【解决方案2】:

      如果我理解这里的问题,您正在尝试连接到 ADB 实例并执行查询。查找活动不支持 ADB 。 https://docs.microsoft.com/en-us/azure/data-factory/control-flow-lookup-activity AFAIK,你不需要走ADB路线,你可以直接查询ADLS。

      【讨论】:

        猜你喜欢
        • 2021-12-28
        • 1970-01-01
        • 2020-11-25
        • 2019-06-21
        • 1970-01-01
        • 1970-01-01
        • 1970-01-01
        • 1970-01-01
        • 1970-01-01
        相关资源
        最近更新 更多