在pom里添加? ?<repository>
??????<id>cloudera.repos</id>
??????<url>https://repository.cloudera.com/content/groups/cdh-releases-rcs</url>
??????<name>Cloudera?Public?Repositor...
分类:
其他好文 时间:
2015-05-14 18:58:12
阅读次数:
385
环境:hive:apache-hive-1.1.0hadoop:hadoop-2.5.0-cdh5.3.2hive元数据以及stats使用mysql进行存储。hivestats相关参数如下:hive.stats.autogather:在insertoverwrite命令时自动收集统计信息,默认开启true;设置为truehive.stats.dbclass:存储hive临时统计信息的数据库,默..
分类:
Web程序 时间:
2015-05-10 01:08:54
阅读次数:
464
Hadoop 2.3.0-cdh5.1.0重编译...
分类:
其他好文 时间:
2015-04-30 09:03:42
阅读次数:
253
一、ClouderaManager/CDH51、关于clouderamanager和CDH是什么,这里不做详细介绍了。有官网和百科介绍。附上官网地址:clouderamanager2、官网的安装指南官方文档提供了三种安装方式:在线自动安装/手动安装包安装/手动使用clouderamanager管理安装此处使用第三种方式安装hadoo..
分类:
其他好文 时间:
2015-04-29 15:21:55
阅读次数:
10771
公司有一个Spark on Yarn集群,基于CM5.2.0+CDH5.2.0搭建,Spark的版本是1.1.0.为了使用Spark1.2.0的一些特性,决定将集群版本升级到CM5.3.3+CDH5.3.3。之所以升级CM,是因为CM的版本号必须大于等于CDH的版本号。下面分成两个步骤介绍升级过程:CM升级和CDH升级。
1 CM升级过程介绍
1.1 admin用户登陆http://1...
分类:
其他好文 时间:
2015-04-15 13:38:14
阅读次数:
279
鉴于hadoop的版本太多,并且组建也多,对于新手来说安装起来往往不是很容易,本文专门以CDH5的发行版为例讲解了hadoop,hbase,hive的单机安装方法。并附上所用到的一些安装包,第三方jar包,配置文件等。...
分类:
其他好文 时间:
2015-04-15 13:32:45
阅读次数:
373
配置软件源服务器1、安装createreporpm -ivh deltarpm-3.5-0.5.20090913git.el6.x86_64.rpm rpm -ivh python-deltarpm-3.5-0.5.20090913git.el6.x86_64.rpm rpm -ivh creat....
分类:
其他好文 时间:
2015-04-09 17:18:41
阅读次数:
157
转载:http://blog.csdn.net/xiao_jun_0820/article/details/40539291本文基于Cloudera Manager5.0.0,所有服务基于CDH5.0.0 parcel安装。CM 安装solr是非常方便的,在集群上添加服务就行了,solrcloud需...
分类:
其他好文 时间:
2015-04-09 13:22:10
阅读次数:
180
修改host[root@hadoop1tmp]#cat/etc/hosts127.0.0.1localhostlocalhost.localdomainlocalhost4localhost4.localdomain4::1localhostlocalhost.localdomainlocalhost6localhost6.localdomain6192.168.16.104hadoop1[root@hadoop1tmp]#[root@hadoop1tmp]#cat/etc/sysconfig/netwo..
分类:
其他好文 时间:
2015-03-30 19:03:39
阅读次数:
136