【问题标题】:Error when trying to move data from on-prem SQL database to Azure Delta lake尝试将数据从本地 SQL 数据库移动到 Azure Delta 湖时出错
【发布时间】:2021-01-29 22:27:32
【问题描述】:

我正在尝试将大量参考数据从本地 SQL 服务器移动到 Delta Lake 以用于数据块处理。为了移动这些数据,我尝试通过简单的复制数据活动来使用 Azure 数据工厂。但是一旦我启动管道,我就会收到以下错误。我用谷歌搜索了这个错误,但找不到任何匹配项。

请注意,三角洲湖中不存在水槽三角洲表?这个错误是否意味着我在将数据移动到 delta Lake 之前手动创建了表?

对目标 Copy data1 的操作失败:ErrorCode=AzureDatabricksTableIsNotDeltaFormat,表benefit 不是增量格式。

【问题讨论】:

    标签: azure azure-data-factory delta-lake


    【解决方案1】:

    使用数据流而不是复制任务解决了这个问题。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2020-09-06
      • 2018-08-08
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2018-08-19
      相关资源
      最近更新 更多