【问题标题】:Azure Data Lake Storage Gen1 Metadata ( in terms of folder structure and size information) into Power BIAzure Data Lake Storage Gen1 元数据(就文件夹结构和大小信息而言)到 Power BI
【发布时间】:2020-05-24 12:44:39
【问题描述】:

在 Azure 门户上 - 我有几个“Data Lake Storage Gen1”资源,我需要构建一个 Power BI 仪表板来显示 1.存储信息(有多少数据驻留在资源上) 2.文件夹级别的存储信息(至少到Level-2),如下所示 父文件夹 (10TB) 子文件夹_1 (3TB) 子文件夹_2 (6TB) 子文件夹_3(1TB)

此数据应作为报表显示在 Power BI 中 - 以便我们可以让多个用户查看此数据。

我了解 - 目前 thsi 在 Azure 门户中可用 - 但这里要求一些平台和运营团队轻松通过 Power BI Dashbaord 获取它 - 这样他们就不需要访问 Azure 门户并查看用于导航到此资源。

这可行吗?如果是 - 你能帮我选择什么选项 - 我可以从 ADLS 检索此元数据以及应该在 Azure 门户中的资源上授予什么凭据/角色?

谢谢, 阿拉文

【问题讨论】:

    标签: azure powerbi azure-data-lake


    【解决方案1】:

    您可以从 Azure Datalake Store API 获取元数据。更多详情见链接

    https://docs.microsoft.com/en-us/rest/api/datalakestore/webhdfs-filesystem-apis

    它将返回一个 JSON 对象。

    它会根据文件夹给出文件大小,还概述了您需要的权限。我会设置一个数据流来访问 API,然后将返回的 JSON 转换为有用的东西。如果您正在使用 ADL 并且正在使用 Azure Datalake Analytics 或 Azure Databricks,您也可以使用它们来获取文件夹列表并遍历它们以获取信息。

    【讨论】:

      猜你喜欢
      • 2021-03-02
      • 2023-03-12
      • 1970-01-01
      • 2020-09-27
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2020-08-21
      • 1970-01-01
      相关资源
      最近更新 更多