Hive默认元数据信息存储在Derby里，Derby内置的关系型数据库、单Session的（只支持单客户端连接，两个客户端连接过去会报错）；Hive支持将元数据存储在关系型数据库中，比如：Mysql/Oracle；本案例采用的是将hive的元数据存储在MySQL中，故需要先安装MySQL数据库，使用...
分类：
其他好文 时间：
2014-08-09 23:10:09
阅读次数：
337
hive0.13.1在hadoop2.4.1伪分布式部署上安装过程环境：redhat enterprice 6.5 +hadoop2.4.1+hive0.13.1+mysql单节点伪分布式部署相关网址：hive官网安装指导：https://cwiki.apache.org/confluence/di...
分类：
数据库 时间：
2014-08-09 21:21:09
阅读次数：
357
1. Impala架构 Impala是Cloudera在受到Google的Dremel启示下开发的实时交互SQL大数据查询工具，Impala没有再使用缓慢的Hive+MapReduce批处理，而是通过使用与商用并行关系数据库中类似的分布式查询引擎（由Query Planner、Query Coord...
分类：
其他好文 时间：
2014-08-09 15:39:48
阅读次数：
451
hive> select product_id, track_time from trackinfo limit 5; Total MapReduce jobs = 1Launching Job 1 out of 1Number of reduce tasks ...
分类：
编程语言 时间：
2014-08-08 17:52:46
阅读次数：
313
Hive UDF整理(可以直接在mysql上测试，hive中没有伪表，需要手动创建，反应慢)字符串函数字符串长度函数：length语法: length(string A)返回值: int说明：返回字符串A的长度举例：hive> select length(‘abcedfg’) from dual;7...
分类：
其他好文 时间：
2014-08-08 12:24:45
阅读次数：
466
在Hive中，需要实现Hive中的函数无法实现的功能时，就可以用Streaming来实现。其原理可以理解成：用HQL语句之外的语言，如Python、Shell来实现这些功能，同时配合HQL语句，以实现特殊的功能。
比如，我有一张不同网站访问的日志表，其中有两个列是url和ref，分别代表当前访问的网址和来源地址，我想要查看用户的来源，即看用户都是从那些网站跳到这些网站上去的，这里有些网站可能域名...
分类：
编程语言 时间：
2014-08-07 23:21:44
阅读次数：
448
Hadoop集群搭建 ?? 目录结构 1. Centos安装之后基本配置 2. 安装和配置JDK 3. 集群网络环境介绍及快速部署 4. ssh免密码登录 5. 规划系统目录. 6. Hadoop集群配置 7. Hadoop集群启动 ? 1. Centos安装之后基本配...
分类：
其他好文 时间：
2014-08-07 16:00:20
阅读次数：
370
话说一个正确的文章能敌千钧万马，一句善意的点拨能敌百万雄狮，一个好友的帮助能让你拨开云雾见青天。搭建mysql主从同步，这两天看网上的博客教程很多，当然，错误的文章会误导你很多，我就被误导了。现将这两天的搭建过程详细记录：前期准备：关闭防火墙关闭SELINUX关闭SELIN..
分类：
数据库 时间：
2014-08-07 07:37:50
阅读次数：
651
Extraction-Transformation-Loading的缩写，中文名称为数据提取、转换和加载。将数据从ORACLE中抽取数据，经过hive进行分析转换，最后存放到ORACLE中去。本案例是纯demo级别，练手使用一、需求将emp和dept表的数据分析最后存放到result表。emp和de...
分类：
其他好文 时间：
2014-08-06 22:14:52
阅读次数：
371
示例数据准备hive中创建dept表create table dept(deptno int,dname string,loc string)row format delimited fields terminated by '\t' lines terminated by '\n' stored ...
分类：
数据库 时间：
2014-08-06 21:58:32
阅读次数：
492
