如何将 csv 文件从谷歌存储复制到 Azure Data Lake

Question

我正在尝试使用 Python 将文件从 Google 存储上传到 Azure Data Lake。 按照这个网址：https://docs.microsoft.com/en-us/azure/data-lake-store/data-lake-store-data-operations-python#create-filesystem-client 但问题是文件在 Google 存储中而不是本地文件，所以我尝试使用 GCS 中文件的公共 URL 而不是本地文件路径，看起来像“https://storage.googleapis.com//.csv" , 但我收到无法打开文件的错误！！

enter image description here

以前有人这样做过，这是正确的方法还是有其他方法

问候

Answer 1

我假设您使用的 API 需要 lpath 来引用本地路径而不是另一个云路径。所以我看到了两个选择：

1. 将文件从 Google 存储下载到您的本地位置，然后使用 ADLS API 从那里上传。
2. 或者，使用 Azure 数据工厂之类的工具来协调数据移动，而无需进行本地复制。