码迷,mamicode.com
首页 > 其他好文 > 详细

hive数据操作

时间:2015-07-27 18:56:47      阅读:124      评论:0      收藏:0      [点我收藏+]

标签:

vi tb_hive.txt
12      34       56
7       12      13
41      2       31
17      21      3
71      2       31
1       12      34
11      2       34


[root@NameNode-82 hive_w]# hive shell

建表结构
hive> CREATE TABLE tb_hive (a int, b int, c int) ROW FORMAT DELIMITED FIELDS TERMINATED BY ‘\t‘;


导入文件
hive> LOAD DATA LOCAL INPATH ‘/work/wangliqin/hive_w/tb_hive.txt‘ OVERWRITE INTO TABLE tb_hive ;
Copying data from file:/work/wangliqin/hive_w/tb_hive.txt
Copying file: file:/work/wangliqin/hive_w/tb_hive.txt
Loading data to table default.tb_hive
Deleted hdfs://NameNode-82:54310/user/hive/warehouse/tb_hive
OK
Time taken: 0.511 seconds

查看表

hive> show tables;                                                                             
OK
t_hive
Time taken: 0.142 seconds


删除表

hive> drop table t_hive;  

OK
Time taken: 2.356 seconds         

[root@NameNode-82 hive_w]# hadoop fs -cat /user/hive/warehouse/tb_hive/tb_hive.txt
16      2       3
61      12      13
41      2       31
17      21      3
71      2       31
1       12      34
11      2       34 


1,hive不支持insert into语句、不支持Date和DateTime类型、truncate table t_hive(清空语句)、delete from table t_hive(删除语句)、不支持 in (子查询语句);
2,hive 清空数据可通过 hive>dfs -rmr /user/hive/warehouse/表名来清空该表下的数据,以便保持表元数据信息不丢失;或者通过create table 表名 like 表名,也可以。
3,hive连表查询,可以通过内连接或者 半连接 from 表1 left semi join 表2 on (表1.列名 = 表2.列名),表2只能在on中出现,不能在select中引用
4,hive中在不需要全局排序的情况下,写排序语句时,最好用distribute by 表名.字段名 sort by表名.字段名 asc | desc 的形式,尽量不用order by形式(只通过一个reduce来完成所有的排序结果)
5,hive的表分为外部表和内部表
Hive 创建内部表时,会将数据移动到数据仓库指向的路径;若创建外部表,仅记录数据所在的路径,不对数据的位置做任何改变。
在删除表的时候,内部表的元数据和数据会被一起删除, 而外部表只删除元数据,不删除数据。这样外部表相对来说更加安全些,数据组织也更加灵活,方便共享源数据。


版权声明:本文为博主原创文章,未经博主允许不得转载。

hive数据操作

标签:

原文地址:http://blog.csdn.net/u011579204/article/details/47087951

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!