Hive操作(集合操作,删除表操作)

摘要:
(1) 设置数据类型数据类型描述语法示例STRUCT类似于c语言中的结构。struct()MAPMAP是一组键值对元组。然后,最后一个元素map()ARRAY数组可以通过字段名['last']获得。它是一组具有相同类型和名称的变量。Array()Hive有三种复杂的数据类型:Array、MAP和STRUCT。Array和Map类似于Java中的Array和Map。“朋友”:

(一)集合数据类型

数据类型

描述

语法示例

STRUCT

c语言中的struct类似,都可以通过“点”符号访问元素内容。例如,如果某个列的数据类型是STRUCT{first STRING, last STRING},那么第1个元素可以通过字段.first来引用。

struct()

MAP

MAP是一组键-值对元组集合,使用数组表示法可以访问数据。例如,如果某个列的数据类型是MAP,其中键->值对是’first->John’和’last->Doe’,那么可以通过字段名[last]获取最后一个元素

map()

ARRAY

数组是一组具有相同类型和名称的变量的集合。这些变量称为数组的元素,每个数组元素都有一个编号,编号从零开始。例如,数组值为[JohnDoe],那么第2个元素可以通过数组名[1]进行引用。

Array()

Hive有三种复杂数据类型ARRAYMAP 和 STRUCTARRAYMAPJava中的ArrayMap类似,而STRUCTC语言中的Struct类似,它封装了一个命名字段集合,复杂数据类型允许任意层次的嵌套。

(1)数据结构如下

{
    "name": "songsong",
    "friends": ["bingbing" , "lili"] ,       //列表Array, 
    "children": {                      //键值Map,
        "xiao song": 18 ,
        "xiaoxiao song": 19
    }
    "address": {                      //结构Struct,
        "street": "hui long guan" ,
        "city": "beijing" 
    }
}

(2)hive上创建表格

create table test(
name string,
friends array<string>,
children map<string, int>,
address struct<street:string, city:string>
)
row format delimited fields terminated by ','    -- 列分隔符
collection items terminated by '_'  --MAP STRUCT 和 ARRAY 的分隔符(数据分割符号)
map keys terminated by ':'  -- MAP中的keyvalue的分隔符
lines terminated by '
';  -- 行分隔符

 具体文件数据如下

songsong,bingbing_lili,xiao song:18_xiaoxiao song:19,hui long guan_beijing
yangyang,caicai_susu,xiao yang:18_xiaoxiao yang:19,chao yang_beijing

(3)将文件的数据同步到hive

load data local inpath '/home/hadoop/file/file1' into table test;

(4)查询某条数据的制定元素

select friend[1],children['xiao song'],address.city from test where name='songsong';

 (5)运行结果

Hive操作(集合操作,删除表操作)第1张

(二)hive删除数据库

(1)删除空的数据库

drop database db_hive2;//若数据库不存在会报错
drop database if exists db_hive2;

 (2)删除不为空的数据库

drop database db_hive cascade;//cascade为强制删除

免责声明:文章转载自《Hive操作(集合操作,删除表操作)》仅用于学习参考。如对内容有疑问,请及时联系本站处理。

上篇使用Git,从码云上clone项目到本地,修改完之后提交TCP的三次握手四次挥手下篇

宿迁高防,2C2G15M,22元/月;香港BGP,2C5G5M,25元/月 雨云优惠码:MjYwNzM=

相关文章

Clickhouse TTL的那些事

TTL简介 ClickHouse原生支持数据生命周期(TTL)管理的功能 TTL即Time To Live,表示数据的存活时间。在MergeTree中,可以为某个列字段或者整张表设置TTL。当时间达到时,若列字段级别的TTL则会删除这一列的数据;若表级别的TTL则会删除整张表的数据;若同时设置了列级别的和表级别的TTL则以先到期的为准。 无论列级别还是表级...

Unity中对注册表进行修改

问题背景: PC端软件开发,当我在Unity中的PlayerSetting中设置好分辨率,每次打包运行后会记忆上次退出时窗口的分辨率(记忆窗口状态),导致下次打开时不是PlayerSetting中的初始设置,而是读取注册表记录的数据。而我的需求时必须每次进去时都是指定的那个分辨率。 问题纠结点: 1.注册表信息是否可删,怎么获取到删除 2.也不能直接删除整...

mysql获取当月数据_MySQL中获取天、周、月等数据

MySQL中获取天、周、月等数据 1.今天 select * from 表名 where to_days(时间字段名) = to_days(now()); 2.昨天 SELECT * FROM 表名 WHERE TO_DAYS( NOW( ) ) - TO_DAYS( 时间字段名) <= 1 3.近7天 SELECT * FROM 表名 where...

SQL 将查询结果插入到另一张表中

INSERT INTO (1) 如果两张表(导出表和目标表)的字段一致,并且希望插入全部数据,可以用这种方法: INSERT INTO 目标表 SELECT * FROM 来源表 WHERE 条件; 例如,要将 test 表插入到 newTest 表中,则可以通过如下SQL语句实现: INSERT INTO newTest SELECT * FROM te...

使用WCF传输DataTable:DataTable和Xml格式的字符串相互转换(C#)

背景:项目中要用到客户端向服务端传数据,使用WCF,绑定webHttpBinding,做了一个小例子。 业务逻辑简介:客户端在a表中添加了几条数据,从SQL Server数据库直接取出新添加的数据(DataTable格式的数据),传递给服务端,服务端有着和客户端相同的数据库结构,将收到的数据也同样添加到自己的a表中。除了添加数据,还有可能进行修改、删除等,...

深度学习之Batch归一化

前言            以下内容是个人学习之后的感悟,转载请注明出处~ Batch归一化   在神经网络中,我们常常会遇到梯度消失的情况,比如下图中的sigmod激活函数,当离零点很远时,梯度基本为0。为了 解决这个问题,我们可以采用Batch归一化。                                                 ...