HDFS、YARN、Zookeeper安装
选择自定义安装
选择安装服务
分配节点
集群设置全部选默认即可
自动启动进程
修改HDFS的权限检查配置
关闭HDFS中的权限检查:dfs.permissions。
配置Hadoop支持LZO
1)点击主机,在下拉菜单中点击Parcel
2)点击配置
3)找到远程Parcel存储库URL,点击最后一栏的加号,增加一栏,输入http://archive.cloudera.com/gplextras/parcels/latest/,之后点击保存更改
4)返回Parcel列表,可以看到多出了LZO,选择下载,下载完成后选择分配,分配完成后选择**。
5)安装完LZO后,打开HDFS配置,找到“压缩编码解码器”一栏,点击加号,添加com.hadoop.compression.lzo.LzopCodec后保存更改
6)打开YARN配置,找到MR 应用程序 Classpath,添加/opt/cloudera/parcels/HADOOP_LZO/lib/hadoop/lib/hadoop-lzo-cdh4-0.4.15-gplextras.jar
7)更新过期配置,重启进程