背景： 机器系统：redhat7.3；已经配置了http服务 集群在安装的时候没有启动spark服务，因为cdh5.15自带的spark不是2.0，所以直接进行spark2.3的安装 参考文档：https://www.cloudera.com/documentation/spark2/latest/ ...
分类：
其他好文 时间：
2018-11-20 17:08:11
阅读次数：
399
加密算法和协议： 对称加密：数据加密(保密性)，(3DES,AES) 公钥加密：身份认证，密钥交换，数据加密，()RSA,DSA 单向加密：数据完整性(MD5,SHA1) 密钥交换：RSA,DH,ECDH(椭圆曲线DH)，ECDHE(临时椭圆曲线DH) SSL:安全套接字层(ssl 1.0,ssl ...
分类：
其他好文 时间：
2018-11-18 12:06:51
阅读次数：
292
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。1.概述本文档描述了在Kerberos与非Kerberos的CDH集群之间BDR不可用的情况下实现数据互导。文档主要讲述1.测试集群环境描述2.CDH的BDR功能验证3.集群之间数据复制要求和限制4.集群之间数据复制的方式5.使用DistCp复制数据注意事项6.通过DistCp进行数据互导这篇文档将着重介绍CDHKerberos集群与非
分类：
其他好文 时间：
2018-11-17 23:21:51
阅读次数：
386
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。1.前置条件本文档将介绍ClouderaManager与CDH的卸载，并基于CDH使用parcels安装且未配置安全（AD/LDAP,Kerberos,DataEncryption）的集群，以下是本次测试环境，但不是本操作手册的硬限制：1.操作系统版本：CENTOS6.52.MySQL数据库版本为5.1.733.CM版本：CM5.114
分类：
其他好文 时间：
2018-11-15 19:49:35
阅读次数：
192
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。1.问题描述通过CDH管理平台，进入Zookeeper管理界面，Zookeeper的平均请求延迟、最小请求延迟、最大请求延迟指标趋势图维持不变，指标数据异常。2.问题复现登录CDH平台，进入Zookeeper管理页面，查看Zookeeper各服务器状态，页面如下：查看如下指标平均请求延迟、最小请求延迟、最大请求延迟三个指标维持不变，指标
分类：
其他好文 时间：
2018-11-15 19:39:09
阅读次数：
210
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。1.概述本文档描述WindowsServer2008R2（windows的内核版本是6.1，与windows7相同）下安装KerberosClient及FireFox下HTTP访问HDFS、Yarn、Hive、HBase等Hadoop服务的WebUI(如Namenode的50070，Yarn的8088)的过程。安装文档主要分为以下几步：
其中出现警告解决方案参考：http://www.cnblogs.com/fujiangong/p/5620050.html 安装环境三台centos7 vmw:cdh-141 192.168.0.141 [主节点]cdh-142 192.168.0.142 [从节点]cdh-143 192.168. ...
分类：
其他好文 时间：
2018-11-15 11:04:17
阅读次数：
206
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。1.问题描述CDH中默认不支持Lzo压缩编码，需要下载额外的Parcel包，才能让Hadoop相关组件如HDFS，Hive，Spark支持Lzo编码。具体请参考：https://www.cloudera.com/documentation/enterprise/latest/topics/cm\_mc\_gpl\_extras.html
分类：
其他好文 时间：
2018-11-14 18:53:06
阅读次数：
160
集群搭建完成之后其实还有很多配置工作要做，这里我列举一些我去做的一些。 首先是去把 zk 的角色重新分配一下，不知道是不是我在配置的时候遗漏了什么在启动之后就有报警说目前只能检查到一个节点。去将 zk 角色调整到三个节点。 上一张目前的角色图 下面我将分别列出各应用的各个简写代表的意义： Hbase ...
分类：
其他好文 时间：
2018-11-14 14:29:09
阅读次数：
188
重启cloudera-scm-server ...
分类：
Web程序 时间：
2018-11-14 12:34:52
阅读次数：
320
