【问题标题】:Nutch 1.14 in windows giving exception java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)ZWindows 中的 Nutch 1.14 给出异常 java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z
【发布时间】:2018-07-08 14:36:21
【问题描述】:
While I am running Apache Nutch 1.14 I am getting following exception.

Injector: starting at 2018-07-08 10:15:56
Injector: crawlDb: crawl/crawldb
Injector: urlDir: urls
Injector: Converting injected urls to crawl db entries.
Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z
        at org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Native Method)
        at org.apache.hadoop.io.nativeio.NativeIO$Windows.access(NativeIO.java:609)
        at org.apache.hadoop.fs.FileUtil.canRead(FileUtil.java:977)
        at org.apache.hadoop.util.DiskChecker.checkAccessByFileMethods(DiskChecker.java:187)

我已经安装了 Java 并将 hadoop 本地库(即 winutils.exe)放在 c:\winutil\bin 并指向 HADOOP_HOME。

不确定如何解决它,也找不到任何文档如何在 Windows 中运行 Nutch 1.14。如果有人有解决方案,请告诉我。

【问题讨论】:

    标签: hadoop nutch


    【解决方案1】:

    我发现解决该错误的唯一方法是来自此线程: Nutch on windows: ERROR crawl.Injector

    关键是注释掉下面这行:

    JAVA_LIBRARY_PATH="`cygpath -p -w "$JAVA_LIBRARY_PATH"`"
    

    阅读 $NUTCH_HOME/lib/native 下的 README.txt 以获取有关 JAVA_LIBRARY_PATH 所引用的 hadoop 二进制文件的更多信息。

    【讨论】:

      猜你喜欢
      • 2017-06-10
      • 1970-01-01
      • 2022-01-21
      • 2020-12-10
      • 2019-01-11
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2019-06-04
      相关资源
      最近更新 更多