我们如何复制 Azure Data Lake Store 文件夹中的任何文件

Question

我们已经有了Move-AzureRmDataLakeStoreItem，它将在 Azure datalake 内的文件夹之间移动文件。我正在寻找的是在数据湖中复制文件而不影响原始文件。

我知道的可能性是——

1. 使用USQL 到EXTRACT 数据从源文件然后OUTPUT 到目标文件 - 但我试图复制所有类型的文件（.gz、.txt、.info、.exe、.msi）和我不确定USQL 是否可以帮助我处理 .gz 或 .exe 或 .msi 文件
2. 使用Data Factory从Data Lake store复制数据/向Data Lake store复制数据

那么，我的问题是，我们是否还有其他东西可供我们在 Azure Data Lake Store 中执行文件副本？

Answer 1

您还有其他几个选择，

1. 在 HDI 集群上运行 distcp - 类似于此处提供的说明。 https://docs.microsoft.com/en-us/azure/data-lake-store/data-lake-store-copy-data-wasb-distcp
2. 如果您要复制有限数量的数据（例如 10-100 的 GB），请使用 adlcopy - https://docs.microsoft.com/en-us/azure/data-lake-store/data-lake-store-copy-data-azure-storage-blob

请问这样就够了吗？还是您想要 Azure Data Lake Store 通过其 REST API 原生支持的东西？

谢谢， 萨钦谢斯 Azure 数据湖项目经理。