【发布时间】:2017-06-06 10:06:41
【问题描述】:
我希望将数据从 Azure SQL 数据库自动同步到 Azure SQL 数据仓库。它可能只需要插入而不是更新,它将涉及 25-35 个表和几个表中的几百万条记录。 (稍后一旦数据同步,我们可能会从源中删除同步记录。)
谁能推荐一些可以做到这一点的工具或方法,满足上述大多数要求?
我查看过数据工厂,但它似乎不适合增量加载
【问题讨论】:
标签: sql azure sql-data-warehouse
我希望将数据从 Azure SQL 数据库自动同步到 Azure SQL 数据仓库。它可能只需要插入而不是更新,它将涉及 25-35 个表和几个表中的几百万条记录。 (稍后一旦数据同步,我们可能会从源中删除同步记录。)
谁能推荐一些可以做到这一点的工具或方法,满足上述大多数要求?
我查看过数据工厂,但它似乎不适合增量加载
【问题讨论】:
标签: sql azure sql-data-warehouse
内部部署方式是SQL Server Integration Services 项目。这将允许您以增量方式和批量方式复制数据,并进行任何所需的转换。另请参阅data flow 文档。
正如 Peter Bons 所述,Azure 平台不直接支持此功能。 如果您有可用的 SQL Server 许可证,则可以使用 SQL Server 和 SSIS 设置 Azure VM。
更多讨论见
其他问题中的一个注释是:
如果您使用 Amazon Web Services,即使是免费版本的服务 允许您在云中创建 Ms SQL Server 数据库 SSIS 目录和可用的服务器代理
我不能保证,但如果没有完整的 SQL Server 许可证可用,您可能想尝试一下。
【讨论】: