Hive的数据在哪里??

  • Hive的数据存放在HDFS之上(真实数据)
  • Hive的元数据可以存放在RDBMS之上(元数据)

Hive数据抽象结构图

Hive DDL

Database:

  • Hive 中的Database 相当于是Hdfs中的一个文件夹
  • Hive 默认自带一个default数据库
    • 默认数据库存放位置:/user/hive/warehouse
    • 位置是由参数决定的:hive.metastore.warehouse.dir
  • Hive所有参数的查询:https://cwiki.apache.org/confluence/display/Hive/Configuration+Properties
  • Hive中需要参看参数信息 使用 set key ,如果需要修改参数的话 使用 set key = value 的方式
    • 这里我是用set 来查看hive中数据库在Hdfs中 默认的存放位置
    • Hive DDL
    • 这里需要注意的是在初始安装好hive之后,Hdfs上并不会有 /user/hive/warehouse 这个目录.需要对hive进行操作之后才会在Hdfs中创建这个目录

DDL简介

DDL : Data Definition Language(描述Hive表数据的结构) 一般包含对数据库的 创建 修改 删除 使用 一些操作;

Create Database(创建数据库)

官网 创建 数据库 详细的创建语法

CREATE (DATABASE|SCHEMA) [IF NOT EXISTS] database_name
  [COMMENT database_comment]
  [LOCATION hdfs_path]
  [WITH DBPROPERTIES (property_name=property_value, ...)];
  • IF NOT EXISTS:加上这句话代表判断数据库是否存在,不存在就会创建,存在就不会创建(生产中一定要添加IF NOT EXISTS)。
  • COMMENT:数据库的描述
  • LOCATION:创建数据库的地址,不加默认在/user/hive/warehouse/路径下
  • WITH DBPROPERTIES:数据库的属性

生产中一般我们使用如下语句 即可

CREATE DATABASE IF NOT EXISTS database_name;

创建的数据库目录在 ${hive.metastore.warehouse.dir}/dbname.db中.

创建数据库
Hive DDL

查看数据库所在目录
Hive DDL

测试不在默认路径下创建数据库,并且添加 额外的描述信息

Hive DDL

Hive DDL

查看数据的详细信息

desc database extended d5_hive_2;

Hive DDL

Drop Database(删除数据库)

DROP (DATABASE|SCHEMA) [IF EXISTS] database_name [RESTRICT|CASCADE];
  • RESTRICT:默认是restrict,如果该数据库还有表存在则报错;
  • CASCADE:级联删除数据库(当数据库还有表时,级联删除表后在删除数据库)。

测试删除表

drop database d5_hive_2;

Hive DDL

在删除 d5_hive 之前我先在 d5_hive中创建一张表,然后在删除数据库
Hive DDL

drop database d5_hive;
hive (d5_hive)> drop database d5_hive;
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. InvalidOperationException(message:Database d5_hive is not empty. One or more tables exist.)

执行的时候报的错误信息,提示 d5_hive不为空,有表存在, 所以在删除数据的时候,如果有表的存在是不能直接删除的.

如果真的确定这个数据库不用了,需要删除,不需要其中的表数据了,那么可以使用如下的命令:
切记 此命令基本不用!!!

drop database d5_hive CASCADE;

Hive DDL

Alter Database(修改数据库内容)

LTER (DATABASE|SCHEMA) database_name SET DBPROPERTIES (property_name=property_value, ...);   -- (Note: SCHEMA added in Hive 0.14.0)
 
ALTER (DATABASE|SCHEMA) database_name SET OWNER [USER|ROLE] user_or_role;   -- (Note: Hive 0.13.0 and later; SCHEMA added in Hive 0.14.0)
  
ALTER (DATABASE|SCHEMA) database_name SET LOCATION hdfs_path; -- (Note: Hive 2.2.1, 2.4.0 and later)

Use Database(切换数据库)

USE database_name;
USE DEFAULT;

Show Databases(显示数据库)

SHOW (DATABASES|SCHEMAS) [LIKE 'identifier_with_wildcards'

相关文章: