CDH (Cloudera’s Distribution, including Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,并集成了很多补丁,可直接用于生产环境。
Cloudera Manager则是为了便于在集群中进行Hadoop等大数据处理相关的服务安装和监控管理的组件,对集群中主机、Hadoop、Hive...
分类:
其他好文 时间:
2015-05-22 21:16:48
阅读次数:
238
org.apache.hadoop.hive.ql.stats包含的类与接口如下图所示:其中:接口:ClientStatsPublisher:包含run方法,在hive中并没有其他类实现该方法,这个主要用于hivestats扩展使用。具体实现需要由hive.client.stats.publishers这个参数决定,这个参数是用逗号隔开的statspublish..
分类:
Web程序 时间:
2015-05-22 19:42:58
阅读次数:
265
1.取整函数:round语法:round(doublea)返回值:BIGINT说明:返回double类型的整数值部分(遵循四舍五入)举例:hive>selectround(3.1415926)fromlxw_dual;3hive>selectround(3.5)fromlxw_dual;4hive>createtablelxw_dualasselectround(9542.158)fromlxw_dual;hive>des..
分类:
其他好文 时间:
2015-05-22 19:39:39
阅读次数:
187
hive独立模式安装--jared该部署笔记是在2014年年初记录,现在放在51cto上。有关hadoop基础环境的搭建请参考如下链接:http://ganlanqing.blog.51cto.com/6967482/1387210JDK版本:jdk-7u51-linux-x64.rpmhadoop版本:hadoop-0.20.2.tar.gzhive版本:hive-0.12.0.tar.gzmysql驱..
分类:
其他好文 时间:
2015-05-22 19:29:55
阅读次数:
149
1.取整函数: round语法: round(double a)返回值: BIGINT说明: 返回double类型的整数值部分(遵循四舍五入)举例:hive> select round(3.1415926) from lxw_dual;3hive> select round(3.5) from lx...
分类:
其他好文 时间:
2015-05-22 13:19:31
阅读次数:
118
1. 取整函数: round
语法: round(double a)
返回值: BIGINT
说明: 返回double类型的整数值部分(遵循四舍五入)
举例:
hive> select round(3.1415926) from lxw_dual;
3
hive> select round(3.5) from lxw_dual;
4
hive> create table lxw_...
分类:
其他好文 时间:
2015-05-22 11:31:31
阅读次数:
99
当时执行hive的导入数据load data inpath "XXXX" into table.....的时候发现总是导不进去,最后试了下简单的从Linux 到 HDFS上传文件发现都不成功,提示datanode的问题。后来省事就直接将以前成功安装的hadoop-2.6.0的文件夹整个替代掉再bin...
分类:
其他好文 时间:
2015-05-22 00:22:40
阅读次数:
127
Hive 是一个基于Hadoop分布式文件系统(HDFS)之上的数据仓库架构,同时依赖于MapReduce。适用于大数据集的批处理,而不适用于低延迟快速查询。Hive将用户的HiveQL语句转换为MapReduce作业提交到Hadoop集群上,监控执行过程,最后返回结果给用户。由于Hive的元数据(...
分类:
其他好文 时间:
2015-05-21 22:25:38
阅读次数:
181
安装前一定要注意版本兼容!安装前一定要注意版本兼容!安装前一定要注意版本兼容!重要的话说三遍,参考《HADOOP&HBASE&HIVE整合》中的兼容原则。由于之前Hadoop是2.4,亲测在Hadoop2.4上hbase1.0.1是可以工作的。而0.94版本存在兼容性的问题。配置所有的配置文件位于附...
分类:
其他好文 时间:
2015-05-21 21:39:47
阅读次数:
152
1.加法操作:+语法:A+B操作类型:所有数值类型说明:返回A与B相加的结果。结果的数值类型等于A的类型和B的类型的最小父类型(详见数据类型的继承关系)。比如,int+int一般结果为int类型,而int+double一般结果为double类型举例:hive>select1+9fromlxw_dual;10hive>creat..
分类:
其他好文 时间:
2015-05-21 19:53:32
阅读次数:
195