【问题标题】:I am Migrating the data from one server to other server with SSIS Package and Triggered that package in Azure Data Factory(ADF)我正在使用 SSIS 包将数据从一台服务器迁移到另一台服务器,并在 Azure 数据工厂 (ADF) 中触发该包
【发布时间】:2022-12-21 21:16:19
【问题描述】:

我正在使用 SSIS 包将数据从一台服务器(azuredatabase)服务器迁移到另一台服务器。我在 Azure 数据工厂 (ADF) 中触发了这个。但是对于 1 表数据有 arrount 130 万数据。因此,要完成该负载,在 Azure 中需要大约 130 分钟的时间。有什么解决方案可以更快地完成加载。

(https://i.stack.imgur.com/nHIyw.png)

我正在使用 SSIS 包将数据从一台服务器(azuredatabase)服务器迁移到另一台服务器。我在 Azure 数据工厂 (ADF) 中触发了这个。但是对于 1 表数据有 arrount 130 万数据。因此,要完成该负载,在 Azure 中需要大约 130 分钟的时间。有什么解决方案可以更快地完成加载。

【问题讨论】:

    标签: ssis azure-data-factory


    【解决方案1】:

    根据灌木丛The DefaultBufferMaxRows and DefaultBufferSize Properties in SSIS 中提到,它说:

    对于大数据量,默认值不一定会给你最好的性能,因此需要一定程度的操作来提高数据流性能。

    DefaultBufferMaxRowsDefaultBufferSize 是可用于改进数据提取的两个数据流任务设置。

    默认缓冲区最大行数:可以保留在这些缓冲区中的行数由此参数指示。

    默认缓冲区大小:用于暂时存储行的默认缓冲区大小由此参数指示(以字节为单位)。

    此外,还有一个名为 AutoAdjustBufferSize 的属性,如果设置为“true”,则忽略 DefaultBufferSize 选项并使用 DefaultBufferMaxRows 确定实际缓冲区大小。

    参考:Data Flow Performance Features

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2017-10-04
      • 2021-07-17
      相关资源
      最近更新 更多