cdh5.14.2-安装文档 一、版本信息： CM/CDH: 5.14.2-1 Linux: Centos7.4 二、准备原料，vmware虚拟机环境： 三、软件列表 如图： 四、更新系统，安装组件，重启系统(CM/CDH执行)： yum install -y epel-release && yum ...
分类：
其他好文 时间：
2018-09-14 15:59:14
阅读次数：
362
使用ansible快速部署cdh 5.6.1 本部署步骤的前提是已安装配置完成ansible，达到快速部署的目的。 1.关闭selinux 2.关闭防火墙 3.修改hosts 4.配置ntp服务 5.优化服务器参数 6.配置主机互信 7.配置jdk 8.配置CM节点 9.配置agent节点 10.常 ...
分类：
其他好文 时间：
2018-09-14 11:04:42
阅读次数：
349
我们知道cm的数据库默认使用的是postgresql数据库，但是我们想存储CM上的相关组件的元数据信息我必须吧他存储在mysql这样的关系型数据库当中，所以我们要初始化数据库使用的是下面的命令。 ...
分类：
数据库 时间：
2018-09-12 20:09:32
阅读次数：
3008
通过Ambari(HDP)或者Cloudera Management (CDH)等集群管理服务安装和部署在此不多介绍，只需要在界面直接操作和配置即可，本文主要通过原生安装，熟悉安装配置流程。 1.选取三台服务器（CentOS系统64位） 114.55.246.88 主节点 114.55.246.77 ...
分类：
其他好文 时间：
2018-09-12 17:59:35
阅读次数：
175
在CDH上用外部Spark2.2.1 （hadoop free版本）standalone 模式安装和配置 CarbonData cdh中外部spark（standalone模式安装） 5、把安装包和配置文件拷贝到其他机器 复制hdfs、hive等配置文件到spark的conf目录 spark-env ...
分类：
其他好文 时间：
2018-09-08 19:59:54
阅读次数：
1040
使用spark引擎查询hive有以下几种方式：1>使用spark-sql(spark sql cli)2>使用spark-thrift提交查询sql3>使用hive on spark(即hive本身设置执行引擎为spark)针对第一种情况：1>ambari 已经支持，不需要特殊配置；2>cdh不支持 ...
分类：
其他好文 时间：
2018-09-06 16:13:45
阅读次数：
768
最近通过CM的形式安装大数据组件，然后出现了各种问题。 看到上面的截图，第一感觉是不是哪里没有设置好，或者是什么情况，然后查看打印出来的日志。日志的截图如下： 这个感觉就是日志目录创建不了，肯定是哪里权限不足导致的，但是当创建好之后，赋予权限的时候还是不可以，然后重新装了好多次，还是一直报这个错。最 ...
分类：
其他好文 时间：
2018-09-04 13:48:24
阅读次数：
304
最近在做CM和CDH的安装遇到了在安装的过程当中出现了主机运行状态不良的情况，截图如下： 出现这个首先想到的是这台机器的启动的过程当中考虑除了问题（因为我装了好多次，考虑集群环境被污染了） 然后在网上找到说删除一个文件即可，删除的问题文件如下： ...
分类：
其他好文 时间：
2018-09-04 13:47:45
阅读次数：
1197
参考自https://blogs.msdn.microsoft.com/pliu/2016/06/18/run-hue-spark-notebook-on-cloudera/ 说明 使用Cloudera Manager部署CDH群集时，可以使用Hue Web UI运行Hive和Impala查询。但S ...
分类：
其他好文 时间：
2018-08-16 17:43:07
阅读次数：
672
Cloudera Manager Cloudera Manager 分为两个部分：CDH和CM。 CDH是Cloudera Distribution Hadoop的简称，顾名思义，就是cloudera公司发布的Hadoop版本，封装了Apache Hadoop，提供Hadoop所有的服务，包括HDF ...
分类：
其他好文 时间：
2018-08-09 23:16:00
阅读次数：
291
