【问题标题】:Is there way to test my Pyspark notebooks on Databricks有没有办法在 Databricks 上测试我的 Pyspark 笔记本
【发布时间】:2020-11-25 13:43:03
【问题描述】:

我正在开发数据块并想测试我在笔记本中定义的实用功能,最好的方法是什么?提前感谢您的帮助?????????

【问题讨论】:

    标签: python-3.x pyspark pytest databricks azure-databricks


    【解决方案1】:

    您可以使用databricks-connect:Databricks Connect 允许您将您喜欢的 IDE(IntelliJ、Eclipse、PyCharm、RStudio、Visual Studio)、笔记本服务器(Zeppelin、Jupyter)和其他自定义应用程序连接到 Databricks 集群并运行 Apache火花代码。

    使用 databricks-connect,您可以将您喜欢的 IDE 连接到您的 Databricks 集群。这意味着您现在可以更轻松地链接、测试和打包要在 Databricks 上运行的代码。

    更多详情,请参考Test Code in Databricks Notebooks

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2021-08-19
      • 1970-01-01
      • 2022-08-09
      • 1970-01-01
      • 1970-01-01
      • 2021-02-16
      • 2021-08-22
      • 2023-03-24
      相关资源
      最近更新 更多