Hive基础07、Hive引入Map
1、建表语句
创建一个成绩表,记录学生的各个科目成绩:
英文关键字解析:
代码语言:javascript复制1、CREATE TABLE 创建一个指定名字的表,如果库中已有相同名的表,则抛出异常; 用户可以使用 IF NOT EXISTS 选项来忽略此异常。 2、EXTERNAL 关键字可以让用户创建一个外部表(默认创建内部表)。外部表在建表的同时必须指定一个指向实际数据的路径(LOCATION),Hive在创建内部表时,会将数据移动到数据仓库指向的路径;若创建外部表,仅记录数据所在的路径,不对数据的位置做任何改变。在删除表的时候,内部表的元数据和数据会被一起删除,而外部表只删除元数据,不删除数据。 3、COMMENT 是给表字段或者表内容添加注释说明的。 4、PARTITIONED BY 给表做分区,决定了表是否为分区表。 5、CLUSTERED BY 对于每一个表(table)或者分区, Hive 可以进一步组织成桶,也就是说桶是更为细粒度的数据范围划分,Hive采用对列值哈希,然后除以桶的个数求余的方式决定该条记录存放在哪个桶当中。 6、ROW FORMAT DELIMITED FIELDS TERMINATED BY ‘,’, 这里指定表存储中列的分隔符,默认是 01,这里指定的是逗号分隔符,还可以指定其他列的分隔符。 7、STORED AS SEQUENCEFILE|TEXTFILE|RCFILE,如果文件数据是纯文本,可以使用 STORED AS TEXTFILE,如果数据需要压缩,使用 STORED AS SEQUENCEFILE。 8、LOCATION 定义 hive 表的数据在 hdfs 上的存储路径,一般管理表(内部表不不要自定义),但是如果定义的是外部表,则需要直接指定一个路径。
create table tb_map(id int,name string,score map<string,float>)
row format delimited
fields terminated by 't'
collection items terminated by ','
map keys terminated by '='
lines terminated by 'n'
stored as textfile;
查看结构:
代码语言:javascript复制desc tb_map;
2、创建数据文件【mapInfo.txt】
1 王姑娘 javaBase=92,H5=95,Spring=98 2 巧荣姑娘 javaBase=90,H5=98,Spring=95 3 杨先生 javaBase=100,H5=100,Spring=100
上传至服务:
3、导入数据
代码语言:javascript复制load data local inpath '/opt/temp/mapInfo.txt' into table tb_map;
可以看到数据是引入成功的,并且是map形式的。