CDH集群IO测试

最近集群在运行Hive逻辑时，监控组经常会提出服务器报警，检测发现CDH集群存在较大的IO瓶颈。

日志数据IO测试，数据量134676620，逻辑：去重求总数，分组，排序。

优化思路：Hive引起的小文件问题和数据倾斜问题。

根本方案：提高服务器性能。