【问题标题】:Extra Blob Created after Sink in Data Flow在数据流中接收后创建的额外 Blob
【发布时间】:2021-10-10 04:42:19
【问题描述】:

我正在使用 Azure 数据工厂中的数据流活动从 Snowflake 导入 Azure blob。 我注意到,每当我通过接收器创建 blob(放置在 provider/Inbound/ 文件夹内)时,我都会在 Inbound 之外得到一个额外的空 blob 文件。

所有数据流接收器都会发生这种情况吗?

【问题讨论】:

  • 这很常见,并不是数据工厂独有的。它们是数据移动/暂存/租赁操作的残余,可以安全删除或忽略。

标签: azure-data-factory azure-data-factory-2 azure-data-flow


【解决方案1】:

我创建了一个数据流并将数据从雪花加载到 blob,但我没有看到在我的接收器文件夹之外生成任何其他 blob 文件。

确保接收器连接指向正确的文件夹,并仔细检查除此数据流之外是否有任何其他进程正在运行,这会导致在接收器文件夹之外创建额外文件。

雪花来源

下沉

输出文件路径生成out文件:

接收器设置添加日期作为文件名:

输出文件夹

输出文件在执行数据流后生成。

【讨论】:

    猜你喜欢
    • 2012-07-30
    • 1970-01-01
    • 2012-12-16
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2018-05-05
    • 2015-04-02
    • 2017-07-22
    相关资源
    最近更新 更多