SQL-Hive中常用的表格操作

SQL-Hive中常用的表格操作

今天我们来讲讲Hive中常用的表格操作指令及相关效果。

Hive系列文章预计10-20篇，主要讲数据分析中最基础的SQL技能。

01-最基础的建表语句

Hive建表的全部建表语法如下：

CREATE [EXTERNAL] TABLE [IF NOT EXISTS] 表名 (列名 data_type [COMMENT 列注释], ...) [COMMENT 表注释] [PARTITIONED BY (列名 data_type [COMMENT 列注释], ...)] [CLUSTERED BY (列名, 列名, ...)  [SORTED ，BY (列名 [ASC|DESC], ...)] INTO num_buckets BUCKETS] [ROW FORMAT row_format] [STORED AS file_format] [LOCATION hdfs_path]

所有[ ]中的内容都是可选项，即可有可无，下面我们分别详细介绍。

CREATE [EXTERNAL] TABLE [IF NOT EXISTS] 表名

(列名 data_type)

是建表语句必须有的，举个例子，我们要建立一个用户启动表：

CREATE TABLE t_od_use_cnt (       date_8 INT       ,platform string       ,app_version string       ,user_id BIGINT       ,use_cnt INT       ,is_active TINYINT       );

首先我们建一个库app，然后使用并在其中建表，执行效果如下：

hive> create database app; OK Time taken: 0.899 seconds hive> use app; OK Time taken: 0.03 seconds hive> create table t_od_use_cnt(     >       date_8 int     >       ,platform string     >       ,app_version string     >       ,user_id bigint     >       ,use_cnt int     >       ,is_active tinyint     >       ); OK Time taken: 0.389 seconds

备注：Hive中的关键字大小写是不区分的，所有关键字均可使用小写。

02-查看表结构

执行语句：

DESC 表名;

查询上一步新建表的字段及字段对应的数据类型，运行效果如下：

hive> desc t_od_use_cnt; OK date_8                int                                    platform              string                     app_version           string                               user_id               bigint                                use_cnt               int                                is_active             tinyint                                Time taken: 0.28 seconds, Fetched: 6 row(s)

03-删除表

删除表的语句和删除库的类似，只是把database换成了table，都是使用drop关键字进行删除操作，慎重操作：

DROP TABLE 表名;

04-建分区表

Hive中有分区表的概念，分区表改变了Hive对数据存储的组织方式。查询时如果我们限定了分区范围，Hive就可以直接去相应的目录下查询数据，而不需要扫描整个表，所以当数据量很大时可以显著提高查询性能。

我们还是以t_od_use_cnt为例，建表语句如下：

05-查询既有建表语句

在公司中需要查询既有表的建表格式时使用以下语句即可：

show create table tablename;

查询上文已建表格效果如下：

hive> show create table t_od_use_cnt; OK CREATE TABLE `t_od_use_cnt`(   `platform` string COMMENT '平台 android,ios',    `app_version` string COMMENT 'app版本,',    `user_id` bigint COMMENT '用户id',    `use_cnt` int COMMENT '当日使用次数',    `is_active` tinyint COMMENT '是否活跃') PARTITIONED BY (    `date_8` int COMMENT '日期') ROW FORMAT DELIMITED    FIELDS TERMINATED BY ','  STORED AS INPUTFORMAT    'org.apache.hadoop.mapred.TextInputFormat'  OUTPUTFORMAT    'org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat' LOCATION   'hdfs://hadoop:9000/usr/hive/warehouse/t_od_use_cnt' TBLPROPERTIES (   'transient_lastDdlTime'='1556161316')