【问题标题】:Azure Data Factory Copy Pipeline Did Not Copy Data Into The SinkAzure 数据工厂复制管道未将数据复制到接收器
【发布时间】:2020-09-18 05:39:23
【问题描述】:

我在 azure 数据工厂中创建了一个测试复制管道,它基本上从 azure blob 存储中的文本文件中读取 2 个示例行并将其加载到 Azure sql 数据库中的表中,运行成功。

但是没有记录被插入到表中。源文件只有 34 字节,我读取的 azure blob 存储的最小块大小为 64KB,是不是因为我的测试文件太小,即使管道运行成功,azure 也无法读取它?

【问题讨论】:

    标签: azure-blob-storage azure-data-factory


    【解决方案1】:

    会不会是因为我的测试文件太小导致 azure 无法读取 即使管道成功运行了?

    我相信这与文件大小无关,因为我用单行测试过,它对我来说很好。

    请尝试以下建议:

    1.检查接收器数据集的配置是否正是您想要的。

    2.查看源数据集的数据预览是否正确。

    3.检查管道的监控日志,尤其是输入大小和输出大小。

    4.尝试配置另一个接收器数据集,例如blob存储,以检查数据是否可以成功传输到blob存储。

    如果您有其他问题,请随时告诉我。

    【讨论】:

    • 非常感谢,原来我犯了一个错误,再次将接收器配置为 azure blob 存储。现在一切都很好。虽然我必须说我在整个 azure portal 的事情上有点挣扎。东西分散在各个地方,使得在服务之间切换非常混乱。也许只是我对界面还很陌生,可能会变得更好。
    • @user13128577 我相信如果您熟悉门户用户界面,它会变得更好。如果您有任何疑虑,您可以发布新案例或在这里询问,我很乐意为您提供帮助。
    猜你喜欢
    • 1970-01-01
    • 2019-12-11
    • 2019-11-19
    • 2021-09-02
    • 2020-12-31
    • 2021-08-26
    • 2021-10-13
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多