Azure Data Lake Analytics USE-SQL 与 Azure Data Lake Storage Gen 2

Question

问题：将 ADLA (U-SQL) 与 ADLS(Gen2) 结合使用的前进方向是什么？

我已经在美国东部地区使用 Azure Data Lake Store Generation 1 通过 Azure Data factory (ADF v2) 运行 Azure Data Lake Analytics (U-SQL) 作业已有一段时间了

我计划部署另一个实例来满足加拿大客户的需求，并希望设置 Azure Data Lake Store Generation 1

我尝试了什么：

• 我无法在加拿大中部（或任何加拿大地区）创建 Azure Datalake Storage Gen 1 帐户
• 我尝试迁移到 Azure Datalake Storage Gen2，但遇到了 Azure 数据工厂 - U-SQL 活动无法与 Gen2 存储链接服务链接以获取 U-SQL 脚本的问题

我偶然发现了关于这个主题的多个链接：

• https://feedback.azure.com/forums/327234-data-lake/suggestions/36445702-add-support-for-adls-gen2-to-adla
• https://social.msdn.microsoft.com/Forums/en-US/5ce97eef-8940-4591-a19c-934f71825e7d/connect-data-lake-analytics-to-adls-gen-2

这实质上是说 U-SQL / ADLA 不会支持 ADLS Gen2

我有点困惑，因为没有关于 ADLA 方向的官方文档

Answer 1

更新：

这是我的 u-sql 活动的结构。它可以工作并成功处理：（您可以尝试创建一个新的u-sql活动json来替换您的u-sql活动。）

{
    "name": "pipeline4",
    "properties": {
        "activities": [
            {
                "name": "U-SQL1",
                "type": "DataLakeAnalyticsU-SQL",
                "dependsOn": [],
                "policy": {
                    "timeout": "7.00:00:00",
                    "retry": 0,
                    "retryIntervalInSeconds": 30,
                    "secureOutput": false,
                    "secureInput": false
                },
                "userProperties": [],
                "typeProperties": {
                    "scriptPath": "test1/u-sql.txt",
                    "scriptLinkedService": {
                        "referenceName": "LinkTo0730",
                        "type": "LinkedServiceReference"
                    }
                },
                "linkedServiceName": {
                    "referenceName": "AzureDataLakeAnalytics1",
                    "type": "LinkedServiceReference"
                }
            }
        ],
        "annotations": []
    }
}

原答案：

我无法在其中创建 Azure Datalake Storage Gen 1 帐户 加拿大中部（或任何加拿大地区）

就我而言，我也无法在加拿大中部地区创建 datalake gen1。这是我订阅的限制。但是您可以检查一下您身边的资源管理器，也许可以。（Azure 数据湖 gen1 是 'Microsoft.DataLakeStore'）

资源管理器在所有地区都受支持，但您部署的资源可能并非在所有地区都受支持。此外，您的订阅可能存在限制，导致您无法使用支持该资源的某些区域。资源浏览器显示资源类型的有效位置。

请检查此文件：

https://docs.microsoft.com/en-us/azure/azure-resource-manager/management/resource-providers-and-types

我尝试迁移到 Azure Datalake Storage Gen2，但后来遇到了 无法链接 Azure 数据工厂 - U-SQL 活动的问题 使用 Gen2 Storage 链接服务来获取 U-SQL 脚本

在我这边，好像是在读取gen2中的u-sql脚本，你有什么错误吗？