一、安装jdk 并配置环境变量
下载安装jdk后,配置环境变量,主要配置JAVA_HOME\PATH\CLASSPATH;
如:jdk安装目录为C:\Program Files\Java\jdk1.7.0_03
JAVA_HOME配置为:C:\Program Files\Java\jdk1.7.0_03
CLASSPATH配置为:;C:\Program Files\Java\jdk1.7.0_03\lib(注意开头的分号)
PATH添加配置:C:\Program Files\Java\jdk1.7.0_03\bin;D:\BigdataSoft\hadoop-2.6.0\bin;
验证:输入java -version命令查看java版本信息
二、安装Eclipse,创建java项目,看java是否部署成功
三、构建mapreduce项目
1、安装hadoop-eclipse插件
下载对应版本的hadoop-eclipse插件,放到eclipse安装目录下的dropins目录下,重新启动eclipse。
构建mapreduce项目,在新建项目选择目录中会出现mapreduce项目
2、创建wordcount项目,配置hadoop安装目录
3、配置DFS locations
切换到页签Map/Reduce Locations,
如果没有在Windows —> show view----->other…中添加
添加及编辑按钮如下图
添加配置:
4、添加wordcount类,源码从官网上查看,自己准备源数据,验证。
5、常见错误
1)log4j问题:将log4j文件添加都项目中
2)Hadoop环境变量没有配置或者配置有问题。
解决方法:配置hadoop环境变量
3)
4)
5)
6)
7)导入jar包
6、导出jar包
右键点击要导出的类,Export---->
点击next