部署Hadoop/Hive/OraLoader软件 [hadoop@server1 ~]$ tree -L 1 ├── hadoop-2.6.2 ├── hbase-1.1.2 ├── hive-1.1.1 ├── jdk1.8.0_65 ├── oraloader-3.4.0 配置hive met...
分类:
数据库 时间:
2015-12-11 14:43:31
阅读次数:
807
本文根据一些经验数据提供在线聊天服务一个典型的场景:学生的数据,每天早上在设置Hive用户行为数据的基于历史数据的计算,通过工具将数据推HBase,通过业务合作伙伴RPC Service获取用户行为数据总体架构watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQv...
分类:
其他好文 时间:
2015-12-09 15:15:19
阅读次数:
249
转自:http://blog.csdn.net/yangbutao/article/details/8331937整个处理流程包括主要包括,语法解析(抽象语法树,AST,采用antlr),语义分析(sematic Analyzer生成查询块),逻辑计划生成(OP tree),逻辑计划优化,物理计划生...
分类:
其他好文 时间:
2015-12-08 22:03:59
阅读次数:
168
Hive的数据存储(桶表) Hive的数据存储(桶表)桶表桶表是对数据进行哈希取值,然后放到不同文件中存储。 比如说,创建三个桶,而创建桶的原则可以按照左边表中学生的名字来创建对应的桶。这样子把左边的数据存到桶里面...
分类:
其他好文 时间:
2015-12-08 21:50:17
阅读次数:
183
Hive的数据存储(分区表) Hive的数据存储(分区表)分区表Partition对应于数据库的Partition列的密集索引在Hive中,表中的一个Partition对应于表下的一个目录,所有的Partition...
分类:
其他好文 时间:
2015-12-08 18:21:01
阅读次数:
316
Hive的数据类型 Hive的数据类型前面说过,Hive是一个数据仓库,相当于一个数据库。既然是数据库,那么就必须能创建表,既然有表,那么当中就有列,列中就有对应的类型总的来讲,hive的数据类型可以分为三类:基本...
分类:
其他好文 时间:
2015-12-08 14:37:37
阅读次数:
177
Hive的管理(一) Hive的管理(一)Hive的启动方式CLI(命令行)方式Web界面方式远程服务启动方式CLI方式1. 进入命令行方式直接输入/bin/hive的执行程序或者输入hive --service ...
分类:
其他好文 时间:
2015-12-08 14:34:37
阅读次数:
225
Hive的管理(三) Hive的管理(三)Hive的远程服务远程服务启动方式端口号10000启动方式:hive --service hiveserver(注意:以JDBC或ODBC的程序登录到hive中操作数据时,...
分类:
其他好文 时间:
2015-12-08 14:20:45
阅读次数:
189
上一篇,我们介绍了Hive和对其进行了安装,下面我们就初步的使用hive进行讲解。 下面我们开始介绍hive的创建表,修改表,删除表等。
分类:
其他好文 时间:
2015-12-08 07:14:06
阅读次数:
164
Hive入门(二) Hive入门(二)Hive的体系结构○ Hive的元数据Hive将元数据存储在数据库中(metastore),支持mysql、derby、oracle等数据库,Hive默认是derby数据库Hi...
分类:
其他好文 时间:
2015-12-07 15:57:47
阅读次数:
168