【问题标题】:Hive: AppClassLoader cannot be cast to URLClassLoader although using JDK8Hive:尽管使用 JDK8,但 AppClassLoader 无法转换为 URLClassLoader
【发布时间】:2017-12-20 01:40:16
【问题描述】:

安装jdk9后一直看到这个问题:

$hive
Java HotSpot(TM) 64-Bit Server VM warning: Ignoring option MaxPermSize; support was removed in 8.0
SLF4J: Class path contains multiple SLF4J bindings.
SLF4J: Found binding in [jar:file:/usr/local/Cellar/hive/2.3.1/libexec/lib/log4j-slf4j-impl-2.6.2.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: Found binding in [jar:file:/usr/local/Cellar/hadoop/2.8.1/libexec/share/hadoop/common/lib/slf4j-log4j12-1.7.10.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: See http://www.slf4j.org/codes.html#multiple_bindings for an explanation.
SLF4J: Actual binding is of type [org.apache.logging.slf4j.Log4jLoggerFactory]
Exception in thread "main" java.lang.ClassCastException: java.base/jdk.internal.loader.ClassLoaders$AppClassLoader cannot be cast to java.base/java.net.URLClassLoader
    at org.apache.hadoop.hive.ql.session.SessionState.<init>(SessionState.java:394)
    at org.apache.hadoop.hive.ql.session.SessionState.<init>(SessionState.java:370)
    at org.apache.hadoop.hive.cli.CliSessionState.<init>(CliSessionState.java:60)
    at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:708)
    at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:686)
    at java.base/jdk.internal.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at java.base/jdk.internal.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
    at java.base/jdk.internal.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.base/java.lang.reflect.Method.invoke(Method.java:564)
    at org.apache.hadoop.util.RunJar.run(RunJar.java:234)
    at org.apache.hadoop.util.RunJar.main(RunJar.java:148)

但我有

更新了 $PATH 以指向 java8

$java -version
java version "1.8.0_144"
Java(TM) SE Runtime Environment (build 1.8.0_144-b01)
Java HotSpot(TM) 64-Bit Server VM (build 25.144-b01, mixed mode)

更新了 hive 可执行文件以指定 java8

vi $(which hive)

#!/bin/bash
JAVA_HOME="$(/usr/libexec/java_home --version 1.8)" HIVE_HOME="/usr/local/Cellar/hive/2.3.1/libexec" exec "/usr/local/Cellar/hive/2.3.1/libexec/bin/hive" "$@"

验证更新的java版本确实指向jdk8

$/usr/libexec/java_home --version 1.8
/Library/Java/JavaVirtualMachines/jdk1.8.0_144.jdk/Contents/Home

我还应该在这里查看什么?

这是hive 2.3.1macos

 $hive --version
Hive 2.3.1
Git git://jcamachorodriguez-rMBP.local/Users/jcamachorodriguez/src/workspaces/hive/HIVE-apache/hive -r 7590572d9265e15286628013268b2ce785c6aa08
Compiled by jcamachorodriguez on Thu Oct 19 18:37:58 PDT 2017
From source with checksum 03c91029a6103bd91f25a6ff8a01fbcd

【问题讨论】:

  • Hive 有更新版本吗? MaxPermSize 自 JDK 8 以来已过时。ClassCastException 是 Hive 假设系统类加载器是 URLClassLoader(这在 JDK 9 中发生了变化,请参阅此处的发行说明:oracle.com/technetwork/java/javase/…)。
  • 如 OP 中所述,我更新为指向 JDK8 以避免您提到的 JDK9 问题。

标签: java hive classloader java-9 urlclassloader


【解决方案1】:

安装 jdk8 并在 hadoop-env.sh 中相应地更改路径,这对我有用。

【讨论】:

    【解决方案2】:

    我也有同样的问题,我只是去掉JDK 9,不换环境,问题就解决了。

    查看蜂巢,它使用

    JAVA_HOME="$(/usr/libexec/java_home --version 1.7+)" 
    HIVE_HOME="/usr/local/Cellar/hive/2.3.1/libexec" 
    exec "/usr/local/Cellar/hive/2.3.1/libexec/bin/hive" "$@".
    

    【讨论】:

    • 我需要 JDK9 在系统上可用。也许这种方法可以作为一种解决方法 - 但希望有一个基于配置的解决方案。
    【解决方案3】:

    我在设置 hive 时遇到了同样的错误,最初我认为这可能是因为不同的 java 版本。

    但是在检查java版本时,它是jdk 1.8。

    最后在检查 jdk 安装目录 (/Library/Java/JavaVirtualMachine) 时,我发现 jdk 1.8 和 jdk 10 都存在

    我删除了 jdk 10,终于成功了。

    【讨论】:

      猜你喜欢
      • 2020-11-22
      • 1970-01-01
      • 2020-06-02
      • 2013-11-12
      • 2020-10-17
      • 2014-04-24
      • 1970-01-01
      • 1970-01-01
      • 2013-08-25
      相关资源
      最近更新 更多