在windows上搭建hadoop开发环境

下载hadoop:

http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common

windows 上安装hadoop环境

windows 上安装hadoop环境

点击下面链接进行下载

 windows 上安装hadoop环境

然后进行解压

windows 上安装hadoop环境

如果解压出现下面的情况

windows 上安装hadoop环境

则用管理员身份进行解压,cd到压缩包所在文件夹下,执行下面的命令

start winrar x -y hadoop-3.1.3.tar.gz

解压完后,bin里面还缺少了winutils.exe和hadoop.dll 需要额外下载

https://github.com/s911415/apache-hadoop-3.1.0-winutils

 windows 上安装hadoop环境

 

windows 上安装hadoop环境

将winutils.exe和hadoop.dll复制到hadoop-3.1.3\bin下

 windows 上安装hadoop环境

然后将hadoop.dll复制到C:\Windows\System32中 否则 会报 Exception in thread "main"java.lang.UnsatisfiedLinkError:org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z

windows 上安装hadoop环境

配置环境变量:

新建HADOOP_HOME

windows 上安装hadoop环境

编辑Path:%HADOOP_HOME%\bin;

windows 上安装hadoop环境

打开cmd,输入hadoop version

windows 上安装hadoop环境

如果出现上面的情况,则修改hadoop-env.cmd中的

JAVA_HOME=C:\PROGRA~1\Java\jdk1.8.0_111

PS:因为Program Files中存在空格,若是直接使用会出现错误,可以进行如下处理: 只需要用PROGRA~1 代替Program Files,即改为C:\PROGRA~1\Java\jdk1.8.0_111

windows 上安装hadoop环境

 windows 上安装hadoop环境

再次在cmd中输入hadoop version

windows 上安装hadoop环境

说明成功

相关文章:

  • 2022-01-15
  • 2021-12-16
  • 2022-02-09
  • 2022-02-10
  • 2022-12-23
  • 2021-08-13
  • 2021-11-19
猜你喜欢
  • 2022-01-18
  • 2021-11-28
  • 2021-08-04
  • 2021-11-17
  • 2021-07-30
  • 2021-12-31
  • 2021-10-12
相关资源
相似解决方案