【问题标题】:Benchmark test for polybase with azure data lake使用 azure 数据湖对 polybase 进行基准测试
【发布时间】:2018-01-22 05:09:49
【问题描述】:

有没有人使用带有 adl 的 polybase 进行基准测试,我想知道我是否有一个包含 400 万行的数据文件,polybase 是否有助于将这些行提取到数据仓库。任何人都可以发布任何我可以了解这些事情的文章。

【问题讨论】:

    标签: azure data-warehouse azure-data-lake polybase


    【解决方案1】:

    是的,微软已经进行了一些试验,例如:

    使用数据工厂在 15 分钟内将 1 TB 加载到 Azure SQL 数据仓库 https://docs.microsoft.com/en-us/azure/data-factory/data-factory-load-sql-data-warehouse

    这是使用数据工厂,但它实际上是 Polybase 在幕后完成了繁重的工作。现在,它使用 Polybase 和 Blob 存储(不是 Data Lake),但你明白了。作为一个实验,您为什么不设置、运行它,然后将其转换为使用 Data Lake 并报告回来?

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2016-04-23
      • 2012-02-02
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多