【问题标题】:azure data factory compression limits天蓝色数据工厂压缩限制
【发布时间】:2021-10-11 08:49:44
【问题描述】:

我要准备一些来自blob storage 的导出功能。为此,我想使用 azure 数据工厂 (ADF),在其中我将使用 target data set blob storagezip compression 的复制活动。我只是找不到有关目标 zip 文件可能有多大的信息。就我而言,它介于几百 MB 到几百 GB 之间。是否有一些文档或有人有使用 ADF 创建巨大 (>100GB) zip 文件的经验?

【问题讨论】:

    标签: azure-data-factory azure-data-factory-2 azure-data-factory-pipeline


    【解决方案1】:

    数据工厂旨在扩展以处理 PB 级数据。

    但是,有效负载大小的限制与您可以使用 Azure 数据工厂移动和处理的数据量无关。

    要了解有关 Azure 数据工厂限制的更多信息,您可以参考 documentation

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2020-03-28
      • 1970-01-01
      • 2022-07-25
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多