dbutils.notebook.run 不选择保存在 DBFS 位置的运行笔记本

Question

我将包含多个 python 笔记本和脚本的数据块工作区目录 (/Users/xyz/) 内容导出到数据块特定位置，例如/dbfs/tmp 然后尝试调用以下代码从导出的位置运行名为 xyz.py 的 python 笔记本，如下所示：

dbutils.notebook.run("/dbfs/tmp/xyz", timeout_seconds=1200)

OR

dbutils.notebook.run("dbfs:/tmp/xyz", timeout_seconds=1200)

OR

dbutils.notebook.run("../../tmp/xyz", timeout_seconds=1200)

dbutils 总是找不到笔记本路径并给出以下异常：

com.databricks.WorkflowException: com.databricks.NotebookExecutionException: Unknown state: Notebook not found: /dbfs:/tmp/xyz

虽然如果我检查笔记本是否存在相同的 dbfs 路径，那么我可以看到笔记本已被放置。

如何从 databricks 运行具有特定位置的 dbutils.notebook.run 语句？

Answer 1

这是 dbutils.notebook.runs 的例外行为。当您指定"/Users/abc@org.com/notebookname" 以外的位置时，它会引发以下错误消息com.databricks.WorkflowException: com.databricks.NotebookExecutionException: Unknown state: Notebook not found: /tmp/mount.dbc。

我建议您将所有笔记本放在用户下，然后您可以使用dbuitls.notebook.run("/Users/abc@org.com/NotebookName") 调用笔记本。