自定义 Azure Synapse Workspace Spark 群集的节点答案

【问题标题】：Customizing nodes of an Azure Synapse Workspace Spark Cluster自定义 Azure Synapse Workspace Spark 群集的节点
【发布时间】：2021-04-23 02:54:02
【问题描述】：

在Azure Synapse workspace 中创建Spark 集群时，是否可以将任意文件和目录安装到它的cluster nodes 和/或节点的underlying distributed filesystem 上？

任意文件和目录，我的字面意思是任意文件和目录；不仅仅是额外的Python 库，如演示的here。

Databricks 巧妙地提供了一种在其集群节点上执行此操作的方法（在this document 中进行了描述）。现在我想看看是否有办法在Azure Synapse Workspace Spark Cluster 上做同样的事情。

谢谢。

【问题讨论】：

标签： azure apache-spark databricks azure-synapse

【解决方案1】：

很遗憾，Azure Synapse Analytics 不支持任意二进制安装或写入 Spark 本地存储。

我建议您提供相同的反馈：

https://feedback.azure.com/forums/307516-azure-synapse-analytics

您在这些论坛中分享的所有反馈都将由负责构建 Azure 的 Microsoft 工程团队进行监控和审查。

【讨论】：

确实，我们正在与 MSFT 交谈，但我也会在那里发帖。谢谢。