Databricks 笔记本硬编码

Question

我有一个用于开发和生产环境的数据块和一个存储帐户。从 dev 区域到 prod 区域的代码提升是通过 Azure DevOps CI/CD 管道完成的。在 dev 中，目标文件路径配置为 dev adls，在 prod 环境中应将其更改为 prod adls。有没有办法可以删除这种硬编码并使用 DevOps 实现代码提升？

Answer 1

是的，你绝对可以做到。

在 prod Databricks 中，只需将它们存储为环境变量（可以手动设置或使用 cluster configure 设置）

通常，我只设置这些变量：

• ADLS 存储名称
• 访问键

这样，您无需在代码中硬编码这些变量。而且，这样更安全。

参考：https://docs.databricks.com/data/data-sources/azure/adls-gen2/azure-datalake-gen2-get-started.html#get-an-azure-adls-access-key