当我有 hive-site.xml 和其他错误时，Hive shell 未打开

Question

我对 Hive 比较陌生。我在 Vagrant VM 上安装了 Hive 2.3.2，但在运行 Hive 时遇到了问题。

我是这样安装的：

wget http://ftp.heanet.ie/mirrors/www.apache.org/dist/hive/hive-2.3.2/apache-hive-2.3.2-bin.tar.gz
tar -xzf apache-hive-2.3.2-bin.tar.gz
sudo mv apache-hive-2.3.2-bin /usr/local/hive

然后我将以下内容添加到我的 bashrc：

export HIVE_HOME=/usr/local/hive
export HIVE_CONF_DIR=/usr/local/hive/conf
export PATH=$HIVE_HOME/bin:$PATH
export CLASSPATH=$CLASSPATH:/usr/local/hadoop/lib/*:.
export CLASSPATH=$CLASSPATH:/usr/local/hive/lib/*:.

然后我将以下内容添加到我的 hive-config.sh

export HADOOP_HOME=/usr/local/hadoop

并运行以下命令：

sudo $HADOOP_HOME/bin/hadoop fs -mkdir -p     /tmp
sudo $HADOOP_HOME/bin/hadoop fs -mkdir -p    /user/hive/warehouse
sudo $HADOOP_HOME/bin/hadoop fs -chmod g+w   /tmp
sudo $HADOOP_HOME/bin/hadoop fs -chmod g+w   /user/hive/warehouse
sudo $HIVE_HOME/bin/schematool -dbType derby -initSchema

之后，当我运行 hive 命令时，hive 命令行按预期出现。但是，当我尝试任何命令显示为显示表时；我收到以下错误：

FAILED: SemanticException org.apache.hadoop.hive.qlmetadata.HiveException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

几天前我遇到了这个错误并设法修复它。然而，昨天没有改变任何东西，一切都停止了工作。 我最初通过执行以下操作来修复它：

首先我检查了 conf 文件夹，发现里面只有模板文件，所以我运行了以下命令：

sudo cp hive-default.xml.template hive-site.xml
sudo cp hive-env.sh.template hive-env.sh

我编辑了 hive-env.sh 文件以包含以下内容：

export HADOOP_HEAPSIZE=1024
# Set HADOOP_HOME to point to a specific hadoop install directory
export HADOOP_HOME=/usr/local/hadoop
#hive 
export HIVE_HOME=/usr/local/hive
# Hive Configuration Directory can be controlled by:
export HIVE_CONF_DIR=$HIVE_HOME/conf

然后通过运行确保我可以访问：

sudo chmod a+rwx 。 --递归

最初这是有效的，当我输入显示表时；它跑了。但是昨天它停止工作，并且 HIVE 命令行将不再出现。我收到以下错误消息：

Logging initialized using configuration in jar:file:/usr/local/hive/lib/hive-common-2.3.2.jar!/hive-log4j2.properties Async: true
Exception in thread "main" java.lang.RuntimeException: java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7Bsystem:user.name%7D
at org.apache.hadoop.fs.Path.initialize(Path.java:254)
at org.apache.hadoop.fs.Path.<init>(Path.java:212)
at org.apache.hadoop.fs.Path.ql.session.SessionState.createSessionDirs(SessionState.java:659)
at org.apache.hadoop.fs.Path.ql.session.SessionState.start(SessionState.java:582)
at org.apache.hadoop.fs.Path.ql.session.SessionState.beginStart(SessionState.java:549)
at org.apache.hadoop.fs.Path.cli.CliDriver.run(CliDriver.java.750)
at org.apache.hadoop.fs.Path.cli.CliDriver.main(CliDriver:java.686)
at sun.reflect.NativeMethodAccessorImpl.invoked(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoked(NativeMethodAccessorimpl.java:62)
at sun.reflect.DelegatingMethodAcessorImpl.invoke(DelegatingMethodAccessorimpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:498)
at org.apache.hadoop.util.Runjar.run(Runjar.java:239)
at org.apache.hadoop.util.Runjar.main(Runjar.java:153)
Caused by: java.netURISyntaxException: Relative path in absolute URI: $(system:java.io.tmpdir%7D/$%7Bsystem:user.name%7D
at java.net.URI.checkPath(URI.java:1823)
at java.net.URI.<init>(URI.java:745)
at org.apache.hadoop.fs.Path.initialize(Path.java:251)
... 12 more

我一直在网上寻找，但找不到任何解决上述问题的方法。配置单元命令行甚至不再出现上述错误。

对此的任何帮助将不胜感激。提前致谢。

Answer 1

检查下面的配置，我希望它会起作用。

(1).bashrc 文件

#HIVE VARIABLE START
export HIVE_HOME=/usr/local/hive
export PATH=$PATH:$HIVE_HOME/bin
#HIVE VARIABLE END

(2) hive-env.sh

export HADOOP_HOME=/usr/local/hadoop export HADOOP_HEAPSIZE=512 export HIVE_CONF_DIR=/usr/local/hive/conf

(3) hive-site.xml

 <property>
    <name>hive.exec.local.scratchdir</name>
    <value>/tmp/${user.name}</value>
    <description></description>
  </property>

<property>
    <name>hive.downloaded.resources.dir</name>
    <value>/tmp/${user.name}_resources</value>
    <description></description>
</property>

<property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://localhost/metastore_db1?createDatabaseIfNotExist=true&amp;autoReconnect=true&amp;useSSL=false</value>
    <description></description>
</property>

<property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>hiveuser</value>
    <description></description>
</property>

(4) 复制数据库连接器jar文件

/usr/local/hive/lib

文件夹 即，如果您使用的是 mysql，则将 mysql-connector.jar 文件复制到 lib 文件夹