【问题标题】:DIU not going beyond 4DIU 不超过 4
【发布时间】:2020-05-20 15:58:07
【问题描述】:

对于从 ADLS Gen1 复制到 Gen2 的简单复制活动,我将 DIU 设置为 32,但这并没有反映我运行复制活动时的情况。 如果我将 DIU 设置为 Auto,即使这样,DIU 也始终为 4,但永远不会超过该值。 (ParallelCopies 设置确实反映正确) Gen1、Gen2、默认 Azure IR 的区域--> 美国东部 2

附上一些细节的截图。

有什么建议吗?

【问题讨论】:

    标签: azure-data-factory azure-data-factory-2


    【解决方案1】:

    DIU设置的范围是2-256。但是,DIU在不同复制场景下的具体行为是不同的,即使你设置了你想要的数字。

    请在此处查看表格list,尤其是以下部分:

    如您所见,DIU 有一些限制,因此您可以根据自定义场景选择最佳设置。

    【讨论】:

    • 谢谢。我已经看过这个文件了。我已将复制行为设置为保留层次结构。我尝试从 ADL Gen1 复制到 gen2,ADL Gen2 到 Gen2,SQL 到 SQL,但每次 DIU 都只有 4,而不是超过。不过,我在另一个 Azure 订阅中没有看到同样的问题。
    • @SomeGuy 好的,那么也许你可以联系 ADF 团队来验证这种奇怪行为的根本原因。
    • @JayGong 我有类似的问题(试图将 DIU 增加到 16),就我而言,我正在尝试将数据从 GCP(bigquery)复制到具有 2.8 gb 数据和 12 mi 记录的 Blob Storage保留层次结构仍然没有增加 DIU。有关如何解决此问题的任何提示?
    【解决方案2】:

    我试图复制 1GB 数据,因此不知何故 DIU 从未超过 4。

    但是当我尝试复制 10GB 数据时,我注意到 DIU 开始扩展到超过 4。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2020-08-27
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多