离线安装ClouderaManager5.3关于CDH和ClouderaManagerCDH(Cloudera‘sDistribution,includingApacheHadoop)，是Hadoop众多分支中的一种，由Cloudera维护，基于稳定版本的ApacheHadoop构建，并集成了很多补丁，可直接用于生产环境（本次项目环境使用了4个节点的CDH5.1.3版本）。C..
分类：
其他好文 时间：
2015-01-08 07:07:05
阅读次数：
454
正在准备做Spark SQL external data source与关系型数据库交互的部分，参考下Sqoop2是如何操作关系型数据库的。下载地址：http://archive.cloudera.com/cdh5/cdh/5/下载并安装：cd /home/spark/app/wget http:/...
分类：
其他好文 时间：
2015-01-07 18:19:09
阅读次数：
373
曾经饱受嘲笑和法律攻击的开源软件，如今已成为技术产业中的一股势力。诸如Docker，Hortonworks 和 Cloudera 这些鲜活的例子，证明了与开发者社区合作能够使公司茁壮成长，社区贡献者们能够帮助其核心技术跟上...
分类：
其他好文 时间：
2015-01-04 17:23:48
阅读次数：
227
1、基本环境准备
[hadoop@hadoop html]$ sudo chkconfig iptables off 禁用防火墙
[hadoop@hadoop html]$ vi /etc/selinux/config
禁用selinux,SELINUX=disabled
注：保存重启系统
2、Cloudera Manager的离线安装包下载,构建CM本地源
[ha...
分类：
其他好文 时间：
2015-01-04 12:12:07
阅读次数：
365
转载自http://www.aboutyun.com/thread-9189-1-1.html问题导读1.CM的安装目录在什么位置？2.hadoop配置文件在什么位置？3.Cloudera manager运行所需要的信息存在什么位置？4.CM结构和功能是什么？1. 相关目录/var/log/clou...
分类：
其他好文 时间：
2014-12-31 19:58:17
阅读次数：
133
1. 相关目录 /var/log/cloudera-scm-installer : 安装日志目录。 /var/log/* : 相关日志文件（相关服务的及CM的）。 /usr/share/cmf/ : 程序安装目录。 /usr/lib64/cmf/ : Agent程序代码。 /var/lib/cloudera-sc...
分类：
其他好文 时间：
2014-12-30 19:23:53
阅读次数：
250
http://www.cloudera.com/content/cloudera/en/documentation/cloudera-manager/v5-0-0/Cloudera-Manager-Installation-Guide/cm5ig_mysql.html#cmig_topic_5_5H...
分类：
其他好文 时间：
2014-12-29 19:50:34
阅读次数：
216
今天是圣诞节，2014年马上要过去了。回顾这一年在大数据研发上的点点滴滴，总结如下三个方面：
一、大数据研发技术路线
目前，存在太多的大数据技术，商业软件，如Teradata、Oracle、SAP、IBM等。开源的，如Hadoop、Spark、MPP DB、NewSQL等。在大数据领域，Hadoop呈一支独大势。经过这段时间的学习和了解，发现Hadoop技术复杂，架构复杂，社区版成熟度可能也就80%左右。要想把Hadoop玩转起来，可能需要投入巨大的成本来完善。Cloudera的
CDH也仅...
分类：
其他好文 时间：
2014-12-25 11:25:53
阅读次数：
719
UpgradeClouderaManager5.2.1to5.3.01.StoptheClouderaManagementService2.StoptheHiveserviceandallservicessuchasImpalaandHuethatusetheHivemetastore.3.
BackupMySQLDatabases(mysqldump-uroot-p--single-transaction
--flush-logs--master-data=2--delete-master-logs--al..
分类：
其他好文 时间：
2014-12-23 17:40:24
阅读次数：
160
cdh5 hadoop redhat 本地仓库配置cdh5 在网站上的站点位置：http://archive-primary.cloudera.com/cdh5/redhat/6/x86_64/cdh/在RHEL6上配置指向这个repo非常简单，只要把：http://archive-primary.cloudera.com/cdh5/redhat/6/x86_64/cdh/cloudera-cdh...
分类：
其他好文 时间：
2014-12-19 15:53:27
阅读次数：
159
