如何在 Azure 数据工厂的复制活动中强制映射

Question

我正在尝试使用 Azure 数据工厂将数据从 cosmosdb 容器复制到 Azure SQL 数据库表。 我在 cosmosdb 中的某些列不是强制性的，可能未定义。问题是对于这些列中的每一列，我在运行复制活动时都会收到以下错误：

Data type of column 'MyProperty' can't be inferred from 1st row of data, please specify its data type in mappings of copy activity or structure of DataSet.

但是，我在映射选项卡中进行了检查，这些属性的类型被正确推断为字符串，并且它们在我的 SQL 存储过程表类型中可以为空。

对于可选的十进制属性，我也有同样的问题，错误表明该值无法解析为 Int64，尽管映射选项卡中的推断类型设置为数字而不是整数...

这是我目前拥有的映射：

和表类型的存储过程

CREATE TYPE [dbo].[MyTableType] AS TABLE
(
    [Id] varchar(256) NOT NULL PRIMARY KEY,
    [SupplierId] varchar(256) NOT NULL,
    [SupplierClientId] varchar(256) NULL,
    [BuyerId] varchar(256) null
)

CREATE PROCEDURE [dbo].[UpsertItems]
    @itemsTable MyTableType readonly
AS
BEGIN
    MERGE MyTable AS target
    USING @itemsTable AS source
    ON (target.Id = source.Id)
    WHEN MATCHED THEN
        UPDATE SET 
            SupplierId = source.SupplierId,
            SupplierClientId = source.[SupplierClientId],
            BuyerId = source.[BuyerId]
    WHEN NOT MATCHED THEN
      INSERT (Id, SupplierId, SupplierClientId, BuyerId)
      VALUES (
        source.Id, 
        source.SupplierId, 
        source.[SupplierClientId], 
        source.[BuyerId]);
END

我找不到直接在数据集中或在复制活动的映射选项卡中强制此属性的数据类型的方法。我该如何解决这个问题？

Answer 1

如果您在复制时创建新表，您可以指定数据类型。但是，如果您要添加或复制到已经存在的表，则会自动推断数据类型。

同时，在复制时自动创建表

如果这没有帮助，请分享示例源数据和一些片段