一、安装jdk 并配置环境变量
下载安装jdk后,配置环境变量,主要配置JAVA_HOME\PATH\CLASSPATH;
如:jdk安装目录为C:\Program Files\Java\jdk1.7.0_03
JAVA_HOME配置为:C:\Program Files\Java\jdk1.7.0_03
CLASSPATH配置为:;C:\Program Files\Java\jdk1.7.0_03\lib(注意开头的分号)
PATH添加配置:C:\Program Files\Java\jdk1.7.0_03\bin;D:\BigdataSoft\hadoop-2.6.0\bin;
验证:输入java -version命令查看java版本信息
二、安装Eclipse,创建java项目,看java是否部署成功
三、构建mapreduce项目
1、安装hadoop-eclipse插件
下载对应版本的hadoop-eclipse插件,放到eclipse安装目录下的dropins目录下,重新启动eclipse。
Eclipse大数据开发环境搭建
构建mapreduce项目,在新建项目选择目录中会出现mapreduce项目
Eclipse大数据开发环境搭建
2、创建wordcount项目,配置hadoop安装目录

Eclipse大数据开发环境搭建
Eclipse大数据开发环境搭建

3、配置DFS locations
切换到页签Map/Reduce Locations,
Eclipse大数据开发环境搭建
如果没有在Windows —> show view----->other…中添加
Eclipse大数据开发环境搭建
添加及编辑按钮如下图
Eclipse大数据开发环境搭建
添加配置:
Eclipse大数据开发环境搭建

4、添加wordcount类,源码从官网上查看,自己准备源数据,验证。
5、常见错误
1)log4j问题:将log4j文件添加都项目中
2)Hadoop环境变量没有配置或者配置有问题。
Eclipse大数据开发环境搭建
解决方法:配置hadoop环境变量
Eclipse大数据开发环境搭建
3)Eclipse大数据开发环境搭建
4)Eclipse大数据开发环境搭建
5)Eclipse大数据开发环境搭建
6)Eclipse大数据开发环境搭建
7)导入jar包

Eclipse大数据开发环境搭建
Eclipse大数据开发环境搭建
6、导出jar包
右键点击要导出的类,Export---->
Eclipse大数据开发环境搭建
点击next
Eclipse大数据开发环境搭建

相关文章:

  • 2021-11-17
  • 2021-06-02
  • 2022-01-22
  • 2021-11-20
  • 2021-05-25
  • 2022-01-10
  • 2021-10-24
猜你喜欢
  • 2021-10-22
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2021-11-19
  • 2021-11-23
相关资源
相似解决方案