我可以直接通过 dataproc 运行导出的数据融合管道吗？

Question

我遇到了并发问题（同时运行多个管道），因此想直接从 dataproc 运行我导出的管道 (json)。是否有任何教程或脚本可以帮助我这样做？

任何帮助或线索将不胜感激

Answer 1

如果您的管道包含 dataproc 作业，您将需要提取该作业信息和create dataproc 作业创建请求。

没有从数据融合管道中仅提取 dataproc 作业的功能。