【问题标题】:What is the relationship between Azure Data Factory and Azure Data MovementAzure 数据工厂和 Azure 数据移动之间有什么关系
【发布时间】:2018-10-20 01:49:50
【问题描述】:

我需要对数据工厂和数据移动有所了解 - 数据工厂(v1 和 v2)都只在少数几个地区可用,但数据移动在许多地区都可用。我想了解 Azure 数据工厂和 Azure 数据移动之间的关系,因为它们与 Azure 区域 (https://azure.microsoft.com/en-gb/global-infrastructure/services/) 相关,以及它们是相关还是完全不同的产品。

例如,如果我在北欧有一个数据工厂,那么该数据工厂处理的所有数据是否总是通过北欧地区,即使源和目标都在美国东部?我想了解的是,数据工厂是否在幕后做了任何聪明的事情,以根据数据的流向和流向在最合适的区域使用数据移动服务。

第二个抽象示例是将数据从澳大利亚的 blob 存储加载到澳大利亚的 SQL 数据库。我知道还有其他方法可以做到这一点,但说我必须使用数据工厂。 ADF 在澳大利亚不可用,所以我会在北欧这样的地方使用它,我的数据会从澳大利亚传输到北欧再返回澳大利亚吗?或者 ADF 的数据移动方面会更聪明并在本地进行吗?

另一个方面是集成运行时 - IR 是否总是将数据返回到 ADF 所在的区域进行处理?

谢谢。

【问题讨论】:

    标签: azure azure-data-factory


    【解决方案1】:

    数据移动服务是数据工厂服务的一部分,它是进行数据传输的真正计算环境。这意味着当您将数据从澳大利亚复制到澳大利亚时,无论数据工厂在哪里(例如在美国东部),它都会使用澳大利亚的数据移动服务来完成复制。数据工厂区域是存储数据工厂元数据的区域。

    对于自托管 IR,数据流不会返回到数据工厂。自托管 IR 将连接到源数据源和接收器数据源以传输数据。(请参阅https://docs.microsoft.com/en-us/azure/data-factory/create-self-hosted-integration-runtime#command-flow-and-data-flow 的更多详细信息)

    如果您关注区域,这里有一些详细信息:对于云复制,复制活动将自动检测接收器数据源区域并使用该区域中的数据移动服务来完成复制。从 CopyWizard UI 创作新管道时,您将看到要使用的区域。并且当复制完成后,您还可以在摘要页面中看到区域执行区域。

    问候, 加里

    【讨论】:

      猜你喜欢
      • 2019-09-03
      • 1970-01-01
      • 2021-04-29
      • 1970-01-01
      • 2015-12-17
      • 2020-06-27
      • 2019-07-19
      • 2017-08-21
      • 2015-02-21
      相关资源
      最近更新 更多