1.概述 在《Hadoop - 实时查询Drill》一文当中,笔者给大家介绍如何去处理实时查询这样的业务场景,也是简略的提了一下如何去实时查询HDFS,然起相关细节并未说明。今天给大家细说一下相关细节,其中包含:HDFS,Hive以及HBase等内容。2.数据源和文件格式 在使用Drill去做实.....
分类:
其他好文 时间:
2015-11-28 15:02:10
阅读次数:
194
想开始学习一下hive,需要一个使用起来方便的客户端,网上搜了一下发现hue是个很常用的工具。于是,就在自己的ubuntu14系统里,尝试安装hue。下面就是自己的安装步骤,记录如下:1、先查看自己的ubuntu的版本号2、安装git sudoapt-getinstallgit3、下载hue的...
分类:
系统相关 时间:
2015-11-28 06:32:29
阅读次数:
260
--case2--
--==========click_log==========--
/*
11ad_1012014-05-0106:01:12.334+01
22ad_1022014-05-0107:28:12.342+01
33ad_1032014-05-0107:50:12.33+01
11ad_1042014-05-0109:27:12.33+01
22ad_1032014-05-0109:03:12.324+01
33ad_1022014-05-0219:10:12.343+01
11ad_10..
分类:
数据库 时间:
2015-11-27 20:07:29
阅读次数:
281
--case1--
--==========order_created==========--
/*
107030072674882014-05-0106:01:12.334+01
101010435050962014-05-0107:28:12.342+01
101030435097472014-05-0107:50:12.33+01
101030435015752014-05-0109:27:12.33+01
101040435140612014-05-0109:03:12.324+01
*/
CREA..
分类:
数据库 时间:
2015-11-27 20:05:21
阅读次数:
388
用来处理数据的 ETL 和 ELT 工具的概述数据集成和数据管理技术已存在很长一段时间。提取、转换和加载(ETL)数据的工具已经改变了传统的数据库和数据仓库。现在,内存中转换 ETL 工具使得提取、加载、转换(ELT)和 ETL 变得更快。对于大数据来说,是否能够使用内置的 Hadoop 工具而不是...
分类:
其他好文 时间:
2015-11-27 17:36:23
阅读次数:
194
2013-03-12 22:071503人阅读评论(0)收藏举报分类:Hadoop(13)目录(?)[+]Hadoop+Hive+Mysql安装文档软件版本redhat enterprise server5.564Hadoop1.0.0Hive0.8.1Mysql5Jdk1.6整体构架共有7台机器,...
分类:
数据库 时间:
2015-11-27 14:30:18
阅读次数:
248
安装hive1.下载hive-0.11.0.tar.gz,解压;2.下载mysql-connector-java-5.1.29-bin.jar并放到hive/lib/下;3.配置hive/conf/hive-site.xml4.安装mysql: 1).解压安装包,进入安装包所在目录,执行命令:ta....
分类:
其他好文 时间:
2015-11-26 23:17:57
阅读次数:
140
其实我就是要让数据存储在hdfs上而已。。。。。。。。多配置点东西就好了,在hbase-site.xml中加入: hbase.rootdir hdfs://yangsy132:9000/user/hive/warehouse/ ...
分类:
其他好文 时间:
2015-11-26 23:06:51
阅读次数:
166
一、hadoop安装虚拟机(centos7)Master:192.168.0.228Slave:192.168.0.207软件apache-hive-1.2.1-bin.tar.gzhadoop-2.6.0-cdh5.4.8.tar.gzjdk-8u65-linux-x64.tar.gzmysql-connector-java-5.1.31-bin.jarhbase-0.98.15-hadoop2-bin.tarzookeeper-3.4.6.tar1.关闭防火墙Syste..
分类:
数据库 时间:
2015-11-24 06:23:30
阅读次数:
467
转自:http://www.aboutyun.com/thread-7598-1-1.htmlhive被大多数企业使用,学习它,利于自己掌握企业所使用的技术,这里从安装使用到概念、原理及如何使用遇到的问题,来讲解hive,希望对大家有所帮助。此篇内容较多:看完之后需要达到的目标1.hive是什么2....
分类:
其他好文 时间:
2015-11-19 01:53:28
阅读次数:
208