【问题标题】:after replace mapred/hdfs/common jar build via Hadoop from SVN "no namenode to stop"在通过 Hadoop 从 SVN “no namenode to stop”替换 mapred/hdfs/common jar 构建后
【发布时间】:2011-02-28 16:38:54
【问题描述】:

我从

签出源代码

http://svn.apache.org/repos/asf/hadoop/common

http://svn.apache.org/repos/asf/hadoop/hdfs

http://svn.apache.org/repos/asf/hadoop/mapreduce

然后得到 hadoop-mapred-0.23.0-SNAPSHOT.jar hadoop-hdfs -0.23.0-SNAPSHOT.jar hadoop-common-0.23.0-SNAPSHOT.jar

但我无法使用这些 jars start-all.sh...

Jobtracker 和 tasktracker 仅启动 5 秒后自动关闭...

有人可以帮忙吗?

我尝试查看日志

tasktracker 说 2011-03-01 00:43:06,242 错误 org.apache.hadoop.io.nativeio.NativeIO:无法初始化 NativeIO 库 java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO.initNative()V 在 org.apache.hadoop.io.nativeio.NativeIO.initNative(本机方法) 在 org.apache.hadoop.io.nativeio.NativeIO.(NativeIO.java:55) 在 org.apache.hadoop.fs.RawLocalFileSystem.setPermission(RawLocalFileSystem.java:558) 在 org.apache.hadoop.fs.FilterFileSystem.setPermission(FilterFileSystem.java:352) 在 org.apache.hadoop.mapred.TaskController.setup(TaskController.java:90) 在 org.apache.hadoop.mapred.TaskTracker.initialize(TaskTracker.java:698) 在 org.apache.hadoop.mapred.TaskTracker.(TaskTracker.java:1391) 在 org.apache.hadoop.mapred.TaskTracker.main(TaskTracker.java:3619) 2011-03-01 00:43:12,983 错误 org.apache.hadoop.mapred.TaskTracker:无法启动任务跟踪器,因为 java.io.IOException:本地异常调用 localhost/127.0.0.1:9001 失败:java.io .IOException:对等方重置连接 在 org.apache.hadoop.ipc.Client.wrapException(Client.java:1063) 在 org.apache.hadoop.ipc.Client.call(Client.java:1031) 在 org.apache.hadoop.ipc.WritableRpcEngine$Invoker.invoke(WritableRpcEngine.java:197) 在 org.apache.hadoop.mapred.$Proxy4.getProtocolSignature(未知来源) 在 org.apache.hadoop.ipc.WritableRpcEngine.getProxy(WritableRpcEngine.java:238) 在 org.apache.hadoop.ipc.RPC.getProtocolProxy(RPC.java:422) 在 org.apache.hadoop.ipc.RPC.waitForProtocolProxy(RPC.java:278) 在 org.apache.hadoop.ipc.RPC.waitForProtocolProxy(RPC.java:232) 在 org.apache.hadoop.ipc.RPC.waitForProtocolProxy(RPC.java:194) 在 org.apache.hadoop.ipc.RPC.waitForProxy(RPC.java:176) 在 org.apache.hadoop.mapred.TaskTracker$2.run(TaskTracker.java:710) 在 java.security.AccessController.doPrivileged(本机方法) 在 javax.security.auth.Subject.doAs(Subject.java:416) 在 org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1142) 在 org.apache.hadoop.mapred.TaskTracker.initialize(TaskTracker.java:706) 在 org.apache.hadoop.mapred.TaskTracker.(TaskTracker.java:1391) 在 org.apache.hadoop.mapred.TaskTracker.main(TaskTracker.java:3619) 引起:java.io.IOException:对等方重置连接 在 sun.nio.ch.FileDispatcher.read0(本机方法) 在 sun.nio.ch.SocketDispatcher.read(SocketDispatcher.java:39) 在 sun.nio.ch.IOUtil.readIntoNativeBuffer(IOUtil.java:251) 在 sun.nio.ch.IOUtil.read(IOUtil.java:224) 在 sun.nio.ch.SocketChannelImpl.read(SocketChannelImpl.java:254) 在 org.apache.hadoop.net.SocketInputStream$Reader.performIO(SocketInputStream.java:59) 在 org.apache.hadoop.net.SocketIOWithTimeout.doIO(SocketIOWithTimeout.java:142) 在 org.apache.hadoop.net.SocketInputStream.read(SocketInputStream.java:159) 在 org.apache.hadoop.net.SocketInputStream.read(SocketInputStream.java:132) 在 java.io.FilterInputStream.read(FilterInputStream.java:133) 在 org.apache.hadoop.ipc.Client$Connection$PingInputStream.read(Client.java:368) 在 java.io.BufferedInputStream.fill(BufferedInputStream.java:235) 在 java.io.BufferedInputStream.read(BufferedInputStream.java:254) 在 java.io.DataInputStream.readInt(DataInputStream.java:387) 在 org.apache.hadoop.ipc.Client$Connection.receiveResponse(Client.java:760) 在 org.apache.hadoop.ipc.Client$Connection.run(Client.java:698)

2011-03-01 00:43:12,984 信息 org.apache.hadoop.mapred.TaskTracker:SHUTDOWN_MSG: /************* em>*************** em>****** SHUTDOWN_MSG:在 Vaio-sz65/127.0.1.1 关闭 TaskTracker **********************************/

【问题讨论】:

    标签: hadoop


    【解决方案1】:

    现在我知道如何处理它了... 先升级dfs!

    【讨论】:

      猜你喜欢
      • 2014-09-26
      • 1970-01-01
      • 2018-05-21
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2020-05-27
      相关资源
      最近更新 更多