【问题标题】:Columns are truncating in Azure data factoryAzure 数据工厂中的列被截断
【发布时间】:2021-07-15 11:42:12
【问题描述】:

我正在从这里读取 PuBchem 数据源(数据 urlhttps://ftp.ncbi.nlm.nih.gov/pubchem/Compound/Extras/MeSH-Pharm)的制表符分隔文件,我正在使用 azure 数据工厂来获取来自 Url 位置和 Blob 存储的数据。但是数据工厂只提供 3 列这就是我的数据集的样子

数据预览

【问题讨论】:

  • 当您从 blob 打开文件时,它是否有完整的字段,还是在那里被截断?
  • 当我下载文件并打开时,我可以看到所有 8 列。但是当我从 Azure 数据工厂打开时,我只能看到 3 列
  • 这只是预览吧?
  • 是的,这只是预览

标签: azure etl azure-data-factory


【解决方案1】:

Data preview 预览时显示有限的行数。预览中显示的列数从文件的第一行开始采用。

只需确保加载到存储中的数据不会被截断

在我的示例文件中,我有超过 3 列的数据,但我的第一行只有 3 列,因此在预览数据中,列数显示为 3。但是文件加载到我的存储中时,所有列都符合预期。

(这里我的第 10 行有 4 列,但在数据预览中显示为 3)。

当我编辑文件以将具有 4 列的行移动到顶部并预览时,它显示 4 列。

【讨论】:

    猜你喜欢
    • 2020-10-01
    • 1970-01-01
    • 2011-07-30
    • 2013-04-20
    • 2020-11-09
    • 1970-01-01
    • 1970-01-01
    • 2020-12-20
    • 2021-11-01
    相关资源
    最近更新 更多