Hive动态分区1、首先创建一个分区表create table t10(name string) partitioned by(dt string,value string)row format delimited fields terminatedby '\t' lines terminated ...
分类:
其他好文 时间:
2015-03-29 22:09:09
阅读次数:
154
Hive 是基于Hadoop 构建的一套数据仓库分析系统,它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系统中的数据,可以将结构化的数据文件映射为一张数据库表,并提供完整的SQL查询功能,可以将SQL语句转换为MapReduce任务进行运行,通过自己的SQL 去查询分析需要的...
分类:
数据库 时间:
2015-03-29 16:25:54
阅读次数:
301
1、修改表名 alter table table_name rename to new_table_name;2、修改列名 alter table tablename change column column_orign column_new int(修改后列的属性) comment 'column...
分类:
其他好文 时间:
2015-03-29 16:20:25
阅读次数:
242
今天要处理一个以json格式存储的数据,想要直接把json的各个项的数据存入HIVE表中。HIVE直接读入json的函数有两个:(1)get_json_object(string json_string, string path)返回值:string说明:解析json的字符串json_string,...
分类:
Web程序 时间:
2015-03-29 00:24:27
阅读次数:
195
一.UDFS函数介绍1. 基本UDF(1)SHOWFUNCTIONS:这个用来熟悉未知函数。 DESCRIBE FUNCTION;(2)A IS NULL A IS NOT NULL(3)A LIKE B 普通sql匹配如 like “a%” A RLIKE B通过正则表达式匹配 A REGEXP ...
分类:
其他好文 时间:
2015-03-28 21:41:12
阅读次数:
220
一、问题hive如何将a 1,2,3b 4,7c 5转化成为:a 1a 2a 3b 4b 7c 5二、原始数据cat row_column.txta 1,2,3b 4,...
分类:
其他好文 时间:
2015-03-28 16:58:11
阅读次数:
131
一、问题hive如何将a b 1a b 2a b 3c d 4c d 5c d 6变为:a b 1,2,3c d ...
分类:
其他好文 时间:
2015-03-28 15:34:17
阅读次数:
107
重要:在使用 JDBC 开发 Hive 程序时, 必须首先开启 Hive 的远程服务接口。使用下面命令进行开启:hive -service hiveserver &1). 测试数据userinfo.txt文件内容(每行数据之间用tab键隔开):1 xiapi2 xiaoxue3 qingqing.....
分类:
数据库 时间:
2015-03-28 14:15:15
阅读次数:
204
一、Hive数据导入导出1、hive数据导出 很多时候,我们在hive中执行select语句,希望将最终的结果保存到本地文件或者保存到hdfs系统中或者保存到一个新的表中,hive提供了方便的关键词,来实现上面所述的功能。 1.将select的结果放到一个的的表格中(首先要用create ...
分类:
其他好文 时间:
2015-03-28 12:51:52
阅读次数:
126
0.上传日志文件到linux中,通过flume将文件收集到hdfs中。
执行命令/home/cloud/flume/bin/flume-ng agent -n a4 -c conf -f /home/cloud/flume/conf/a4.conf -Dflume.root.logger=DEBUG,console
1.建立hive表
create external table bb...
分类:
Web程序 时间:
2015-03-28 08:51:36
阅读次数:
156