Hive 基础

database：在 HDFS 中表现为${hive.metastore.warehouse.dir}或者指定的目录下的一个文件夹；
table ：在 HDFS 中表现为某个 database目录下一个文件夹；
external table ：与 table 类似，在 HDFS 中也表现为某个 database目录下一个文件夹；
partition ：在 HDFS 中表现为 table目录下的子目录；
bucket ：在 HDFS 中表现为同一个表目录或者分区目录下根据某个字段的值进行 hash 散列之后的多个文件；
view ：与传统数据库类似，只读，基于基本表创建。

数据类型      所占字节          开始支持版本 
TINYINT    1byte： -128 ~ 127 
SMALLINT   2byte：-32,768 ~ 32,767 
INT        4byte：-2,147,483,648 ~ 2,147,483,647 
BIGINT     8byte：-9,223,372,036,854,775,808 ~ 9,223,372,036,854,775,807BOOLEAN 
FLOAT4byte单精度 
DOUBLE8byte双精度 
STRING 
BINARY                   从Hive0.8.0开始支持 
TIMESTAMP                从Hive0.8.0开始支持 
DECIMAL                  从Hive0.11.0开始支持
CHAR                     从Hive0.13.0开始支持
VARCHAR                  从Hive0.12.0开始支持
DATE                     从Hive0.12.0开始支持

MySQL(bigint) --> Hive(bigint) 
MySQL(tinyint) --> Hive(tinyint) 
MySQL(int) --> Hive(int) 
MySQL(double) --> Hive(double) 
MySQL(bit) --> Hive(boolean) 
MySQL(varchar) --> Hive(string) 
MySQL(decimal) --> Hive(decimal) 
MySQL(date/timestamp) --> Hive(date)
MySQL(timestamp) --> Hive(timestamp)
注：
Mysql[decimal(12,2)]-->Hive[decimal]会导致导入后小数丢失

CREATE (DATABASE|SCHEMA) [IF NOT EXISTS]database_name
　　[COMMENT database_comment]　　　　　　//关于数据块的描述
　　[LOCATION hdfs_path]　　　　　　　　　　//指定数据库在HDFS上的存储位置
　　[WITH DBPROPERTIES (property_name=property_value, ...)];　　　　//指定数据块属性

dfs -ls /hive/warehouse/;
show databases;

desc database [extended] dbname;

select current_database();

show create database t3;

drop database if existsdbname;
drop database if exists dbname cascade;

use database_name;

CREATE [EXTERNAL] TABLE [IF NOT EXISTS]table_name
　　[(col_name data_type [COMMENT col_comment], ...)]
　　[COMMENT table_comment]
　　[PARTITIONED BY (col_name data_type [COMMENT col_comment], ...)]
　　[CLUSTERED BY (col_name, col_name, ...)
　　　　[SORTED BY (col_name [ASC|DESC], ...)] INTOnum_buckets BUCKETS]
　　[ROW FORMAT row_format]
　　[STORED AS file_format]
　　[LOCATION hdfs_path]；

•CREATE TABLE 创建一个指定名字的表。如果相同名字的表已经存在，则抛出异常；用户可以用 IF NOTEXIST 选项来忽略这个异常
•EXTERNAL 关键字可以让用户创建一个外部表，在建表的同时指定一个指向实际数据的路径（LOCATION）
•LIKE允许用户复制现有的表结构，但是不复制数据
•COMMENT可以为表与字段增加描述
•PARTITIONED BY指定分区
•ROW FORMAT 
　　DELIMITED [FIELDS TERMINATED BY char] [COLLECTION ITEMS TERMINATED BY char]MAP KEYS TERMINATED BY char] [LINES TERMINATED BY char] 
　　　　| SERDE serde_name [WITH SERDEPROPERTIES 
　　　　(property_name=property_value, property_name=property_value, ...)]用户在建表的时候可以自定义 SerDe 或者使用自带的 SerDe。如果没有指定 ROW FORMAT 或者 ROW FORMAT DELIMITED，将会使用自带的 SerDe。在建表的时候，
用户还需要为表指定列，用户在指定表的列的同时也会指定自定义的 SerDe，Hive 通过 SerDe 确定表的具体的列的数据。 
•STORED ASSEQUENCEFILE //序列化文件
　　| TEXTFILE //普通的文本文件格式
　　| RCFILE　　//行列存储相结合的文件
　　| INPUTFORMAT input_format_classname OUTPUTFORMAT output_format_classname //自定义文件格式
　　如果文件数据是纯文本，可以使用 STORED AS TEXTFILE。如果数据需要压缩，使用 STORED ASSEQUENCE 。
•LOCATION指定表在HDFS的存储路径

create tablestudent(
id int,
name string
) row format delimited fields terminated by "001"
stored as textfile;

create external tablestudent_ext(
id int, 
name string
) row format delimited fields terminated by"," 
location "/hive/student";

create external tabletmp.table_add_column_test(
a string comment '原始数据1',
b string comment '原始数据2') comment '表注释'partitioned by(dt string)
row format delimited fields terminated by '