Cloud Data Fusion - 监控管道运行

【问题标题】：Cloud Data Fusion - Monitor pipeline runCloud Data Fusion - 监控管道运行
【发布时间】：2021-08-11 09:23:59
【问题描述】：

我想将所有管道的列表作为每日报告运行。我找不到任何云数据融合库。请有任何建议。

【问题讨论】：

您能详细说明一下吗？你提到你找不到任何库，你想用一些 API 来实现它吗？您想使用 CLI 或监控控制台检查所有作业吗？你想使用 piepline studio 吗？您想要列出所有管道的任何具体原因？
@PjoterS 我想使用 CLI 检查所有作业
不确定该功能是否存在。您是否考虑过使用 GCP UI 以 JSON 格式导出管道或从 Cloud Data Fusion 中检索所有管道？
类似的线程和工作解决方案。 stackoverflow.com/questions/58942876/…

【解决方案1】：

张贴Community Wiki 以获得更好的可见性。

正如评论部分中提到的 OP，有一个类似的线程也可以解决这个问题。可以在这里找到 - Access CDAP Rest API of a Cloud Data Fusion Instance。

可以在 GCP 文档 - Retrieve pipelines 中找到可能对获取 all pipelines、batch pipelines 或 real-time pipelines 有用的其他信息。另一种可能性是使用 JSON 格式从 UI 导出管道。

【讨论】：