【发布时间】:2011-02-28 16:38:54
【问题描述】:
我从
签出源代码http://svn.apache.org/repos/asf/hadoop/common
http://svn.apache.org/repos/asf/hadoop/hdfs
http://svn.apache.org/repos/asf/hadoop/mapreduce
然后得到 hadoop-mapred-0.23.0-SNAPSHOT.jar hadoop-hdfs -0.23.0-SNAPSHOT.jar hadoop-common-0.23.0-SNAPSHOT.jar
但我无法使用这些 jars start-all.sh...
Jobtracker 和 tasktracker 仅启动 5 秒后自动关闭...
有人可以帮忙吗?
我尝试查看日志
tasktracker 说 2011-03-01 00:43:06,242 错误 org.apache.hadoop.io.nativeio.NativeIO:无法初始化 NativeIO 库 java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO.initNative()V 在 org.apache.hadoop.io.nativeio.NativeIO.initNative(本机方法) 在 org.apache.hadoop.io.nativeio.NativeIO.(NativeIO.java:55) 在 org.apache.hadoop.fs.RawLocalFileSystem.setPermission(RawLocalFileSystem.java:558) 在 org.apache.hadoop.fs.FilterFileSystem.setPermission(FilterFileSystem.java:352) 在 org.apache.hadoop.mapred.TaskController.setup(TaskController.java:90) 在 org.apache.hadoop.mapred.TaskTracker.initialize(TaskTracker.java:698) 在 org.apache.hadoop.mapred.TaskTracker.(TaskTracker.java:1391) 在 org.apache.hadoop.mapred.TaskTracker.main(TaskTracker.java:3619) 2011-03-01 00:43:12,983 错误 org.apache.hadoop.mapred.TaskTracker:无法启动任务跟踪器,因为 java.io.IOException:本地异常调用 localhost/127.0.0.1:9001 失败:java.io .IOException:对等方重置连接 在 org.apache.hadoop.ipc.Client.wrapException(Client.java:1063) 在 org.apache.hadoop.ipc.Client.call(Client.java:1031) 在 org.apache.hadoop.ipc.WritableRpcEngine$Invoker.invoke(WritableRpcEngine.java:197) 在 org.apache.hadoop.mapred.$Proxy4.getProtocolSignature(未知来源) 在 org.apache.hadoop.ipc.WritableRpcEngine.getProxy(WritableRpcEngine.java:238) 在 org.apache.hadoop.ipc.RPC.getProtocolProxy(RPC.java:422) 在 org.apache.hadoop.ipc.RPC.waitForProtocolProxy(RPC.java:278) 在 org.apache.hadoop.ipc.RPC.waitForProtocolProxy(RPC.java:232) 在 org.apache.hadoop.ipc.RPC.waitForProtocolProxy(RPC.java:194) 在 org.apache.hadoop.ipc.RPC.waitForProxy(RPC.java:176) 在 org.apache.hadoop.mapred.TaskTracker$2.run(TaskTracker.java:710) 在 java.security.AccessController.doPrivileged(本机方法) 在 javax.security.auth.Subject.doAs(Subject.java:416) 在 org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1142) 在 org.apache.hadoop.mapred.TaskTracker.initialize(TaskTracker.java:706) 在 org.apache.hadoop.mapred.TaskTracker.(TaskTracker.java:1391) 在 org.apache.hadoop.mapred.TaskTracker.main(TaskTracker.java:3619) 引起:java.io.IOException:对等方重置连接 在 sun.nio.ch.FileDispatcher.read0(本机方法) 在 sun.nio.ch.SocketDispatcher.read(SocketDispatcher.java:39) 在 sun.nio.ch.IOUtil.readIntoNativeBuffer(IOUtil.java:251) 在 sun.nio.ch.IOUtil.read(IOUtil.java:224) 在 sun.nio.ch.SocketChannelImpl.read(SocketChannelImpl.java:254) 在 org.apache.hadoop.net.SocketInputStream$Reader.performIO(SocketInputStream.java:59) 在 org.apache.hadoop.net.SocketIOWithTimeout.doIO(SocketIOWithTimeout.java:142) 在 org.apache.hadoop.net.SocketInputStream.read(SocketInputStream.java:159) 在 org.apache.hadoop.net.SocketInputStream.read(SocketInputStream.java:132) 在 java.io.FilterInputStream.read(FilterInputStream.java:133) 在 org.apache.hadoop.ipc.Client$Connection$PingInputStream.read(Client.java:368) 在 java.io.BufferedInputStream.fill(BufferedInputStream.java:235) 在 java.io.BufferedInputStream.read(BufferedInputStream.java:254) 在 java.io.DataInputStream.readInt(DataInputStream.java:387) 在 org.apache.hadoop.ipc.Client$Connection.receiveResponse(Client.java:760) 在 org.apache.hadoop.ipc.Client$Connection.run(Client.java:698)
2011-03-01 00:43:12,984 信息 org.apache.hadoop.mapred.TaskTracker:SHUTDOWN_MSG: /************* em>*************** em>****** SHUTDOWN_MSG:在 Vaio-sz65/127.0.1.1 关闭 TaskTracker **********************************/
【问题讨论】:
标签: hadoop