【问题标题】:Hive Query Taking too long to executeHive 查询执行时间过长
【发布时间】:2017-07-19 05:18:07
【问题描述】:

我正在使用 VM 播放器在本地系统上运行 HIVE。我已将 12 GB 专用于虚拟机,其余 4 GB 用于系统工作。我试图在 HIVE 中获取数据库列表,大约需要 63 秒才能给出结果。然后我尝试创建一个包含 4 列的表,但它既没有给我成功也没有给我失败的结果。你能帮我吗?

【问题讨论】:

  • 发布您的查询和遇到的错误
  • 我没有收到任何错误。屏幕停留在按 Enter 后。没有成功/失败输出。

标签: hive hiveql bigdata


【解决方案1】:

12GB 内存足以执行 create table 命令。请重新启动配置单元并在选择或创建数据库后再次尝试创建表。 请检查您的查询是否正确。和

CREATE TABLE IF NOT EXISTS 员工(eid int、name String、salary String、destination String) 行格式分隔 由‘\t’终止的字段;

如果您可以发布您正在使用的查询,将会很有帮助。

【讨论】:

  • 我重新启动了 HIVE,在不同的终端上运行了查询,结果是一样的。画面冻结了!没有成功/失败。我的查询与您的查询类似,表中只有 2 列,这只是创建表的基本查询。
【解决方案2】:

分配的空间应该没有问题,因为 12 GB 足以执行 Hive。

要知道建表是成功还是失败,可以执行以下操作之一:

在 hive 终端中使用以下命令之一:

a)set hive.metastore.warehouse.dir;
b)describe formatted <table_name>;
c)show create table <table_name>

hive-default.xmlhive-site.xml 具有 hive.metastore.warehouse.dir 属性。

一般是/usr/hive/warehouse

这些将显示配置单元数据的存储位置。

检查是否创建了适当的文件夹及其内容。

这样可以检查成功或失败。

希望对你有帮助。

【讨论】:

  • 能否请您提及为什么答案被否决?
  • 感谢 keshav 的回复,我运行了第一个条件。但我无法运行第二个,因为该表尚未在 HIVE 中创建。它不处理简单的创建表查询。服务已启动并运行!
  • 您是否检查过仓库目录中是否创建了任何文件夹?
猜你喜欢
  • 1970-01-01
  • 2019-12-28
  • 2012-03-11
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多