【问题标题】:How to migrate datalake gen1 datasets to datalake gen2 in azure data factory?如何将 datalake gen1 数据集迁移到 azure 数据工厂中的 datalake gen2?
【发布时间】:2020-01-31 02:59:57
【问题描述】:

最近,对于我们的解决方案,我们被要求从 gen 1 升级到 datalake gen 2 但是,我可以使用 azure 数据工厂将文件夹和文件从 gen 1 加载到 gen2,但在现有数据工厂中,我们有多个与 datalake gen1 关联的数据集。

谁能建议我如何在 azure 数据工厂中将数据集从第 1 代更改为第 2 代?

【问题讨论】:

标签: azure azure-data-factory azure-data-lake azure-data-factory-2 azure-data-lake-gen2


【解决方案1】:

您可以使用 azure 数据工厂加载从 gen 1 到 gen2 的文件夹和文件。

在数据工厂中,您可以像这样更改现有数据集:

数据工厂-->作者-->数据集-->选择现有数据集-->新建:

新的链接服务:

然后数据集将更改链接到 Azure Data Lake Gen 2,只需选择您从 Gen 1 加载的文件。

不要忘记发布更改。

一些限制是您现在必须一个一个地编辑多个数据集。

希望这会有所帮助。

【讨论】:

  • 我们没有规定要更改手臂模板吗?
  • @PradeepKaja 我不确定,我现在不能回答你。您可以自己在模板中进行测试。我能做的就是发布我为您测试过的可行解决方案。
  • 如果我的答案对您有帮助,您可以将其标记为答案(单击答案旁边的复选标记,将其从灰色切换为已填充。)。这对其他社区成员可能是有益的。谢谢。
猜你喜欢
  • 1970-01-01
  • 2019-09-19
  • 2021-02-05
  • 2021-05-12
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2021-05-19
  • 2020-08-09
相关资源
最近更新 更多