【3.7】Hadoop数据压缩

1. 概述

1. 压缩概述
2. 压缩策略和原则
   

2. MR支持的压缩编码

为了支持多种压缩/解压缩算法，Hadoop 引入了编码/解码器，如下表

压缩性能的比较

3.压缩方式选择

1. Gzip压缩
   
2. Bzip2压缩
   
3. Lzo压缩
   
4. Snappy压缩
   

4.压缩位置选择

压缩可以在MapReduce作用的任意阶段启用

5.压缩参数配置

要在Hadoop中启用压缩，可以配置如下参数：