分析 Hadoop 网络带宽消耗的工具答案

【问题标题】：Tools to analyze Hadoop Network Bandwith consumption分析 Hadoop 网络带宽消耗的工具
【发布时间】：2013-06-27 11:10:12
【问题描述】：

我想分析集群中的 Hadoop 1.0.3 带宽消耗。
我可以使用哪个工具/s 仅分析与所有 hadoop 组件相关的所有进程使用的节点之间的带宽消耗：hdfs、jobtrackers、tasktrackers、datanode、namenode、心跳、数据传输......
还想将带宽消耗与流程相关联。
主要问题是它的进程不使用修复端口。如果可能，是否可以使用特定的端口范围或接口/子接口来使用？

【问题讨论】：

标签： networking hadoop bandwidth network-monitoring

【解决方案1】：

当在您的集群中激活时，Ganglia 监控会提供大量指标（尽管我不确定它是否提供带宽消耗）。

有关于它的信息here 和here 以及一个不错的演示页面here。

【讨论】：

似乎是一个很好的选择：成熟、稳定且有据可查。会阅读它并分析它是否符合我的要求。谢谢达维克。