【发布时间】:2021-10-11 17:23:34
【问题描述】:
寻找使用 spark 笔记本将增量数据从 parquet/deltaLake 加载到 Synapse sql 仓库的选项。
【问题讨论】:
标签: python apache-spark azure-synapse
寻找使用 spark 笔记本将增量数据从 parquet/deltaLake 加载到 Synapse sql 仓库的选项。
【问题讨论】:
标签: python apache-spark azure-synapse
Analyze data with dedicated SQL Pools:
以上文档有关于通过加载 FILE_TYPE = PARQUET 数据创建专用 SQL 池的信息。
Analyze data in a storage account:
以上文档分析您的工作区默认数据,因为我们可以通过在您的存储帐户中创建 CSV 和 Parquet 文件将 Blob 存储帐户链接到您的工作区
Load data in dedicated SQL Pool using copy activity:
以上文档为我们提供了有关将数据加载为复制活动的见解。
Analyze data with Spark and Notebook
以上文档将帮助我们创建火花池
【讨论】: