Google Cloud DataProc 的性能监控

Question

我们正在使用 GoogleCloudPlatform 进行大数据分析。 对于处理，我们目前正在使用 google cloud dataproc 和 spark-streaming。

我们想使用 Ganglia、Graphite、Dr.Elephant 等一些监控实用程序来检查工作绩效。

要设置任何这些都需要修改每个节点中的配置。 我想知道，dataproc 是否本机支持任何此类性能监控工具？

Answer 1

这些都不支持开箱即用，但您可以使用 this initialization action 添加 Ganglia。您可以通过编辑脚本来配置它。

然后，您必须关注 these instructions 才能访问 Web UI。