(一)实验环境l实验介质nCentOS-7-x86_64-Everything-1708.isonjdk-8u161-linux-x64.rpmncloudera-manager-centos7-cm5.12.1_x86_64.tar.gznCDH-5.12.1-1.cdh5.12.1.p0.3-el7.parcelnCDH-5.12.1-1.cdh5.12.1.p0.3-el7.parcel.s
分类:
其他好文 时间:
2018-10-08 23:19:14
阅读次数:
354
1. 下载 wget http://repo1.maven.org/maven2/org/mongodb/mongo-hadoop/mongo-hadoop-hive/2.0.2/mongo-hadoop-hive-2.0.2.jar wget http://repo1.maven.org/mave ...
分类:
数据库 时间:
2018-09-19 12:25:33
阅读次数:
1004
CDH5.8 HUE的使用(那些年走过的坑) https://blog.csdn.net/gao123456789amy/article/details/79242713 HUE的时间问题等 http://www.cnblogs.com/hark0623/p/5039776.html ...
分类:
其他好文 时间:
2018-09-17 17:37:05
阅读次数:
117
cdh5.14.2-安装文档 一、版本信息: CM/CDH: 5.14.2-1 Linux: Centos7.4 二、准备原料,vmware虚拟机环境: 三、软件列表 如图: 四、更新系统,安装组件,重启系统(CM/CDH执行): yum install -y epel-release && yum ...
分类:
其他好文 时间:
2018-09-14 15:59:14
阅读次数:
362
spark安装目录下执行start-all.sh后: [zdwy@master spark]$ sbin/start-all.sh starting org.apache.spark.deploy.master.Master, logging to /home/zdwy/cdh5.9/spark/l ...
分类:
其他好文 时间:
2018-09-06 16:13:09
阅读次数:
182
在安装CDH5.14.0的时候,在检查主机的时候,出现了Inspector did not run sucessfully。然后不知道怎么解决,但是CM有很好的错误提示功能。下面是检查的结果: 下面会列出,你安装的机器上的相关服务。自己对比一下看哪些地方是有差异的。 出现这个问题一般都是因为在文件同 ...
分类:
其他好文 时间:
2018-09-04 13:44:16
阅读次数:
1497
安装cdh5到最后报如下错误: 安装失败,无法接受agent发出的检测信号。 确保主机名称正确 确保端口7182可在cloudera manager server上访问(检查防火墙规则) 确保正在添加的主机的端口9000和9001空闲 检查在添加的主机上/var/log/cloudera-scm-a ...
分类:
其他好文 时间:
2018-09-04 13:38:10
阅读次数:
2077
今天同事要对测试环境进行降级(测试高于生产所以要求降级),自己不经常搞运维,但是无奈测试环境没运维管理只能自己上了。 流程和遇到问题按数字表示。 1.重装CM(clouder manager)这个过程还是比较容易的,机器选择升级就好了,记得别点安装JDK(多个版本JDK会影响集群JDK!!!),记得 ...
分类:
其他好文 时间:
2018-09-02 11:57:22
阅读次数:
243
近日需要在项目用到kafka,然后本地使用cdh集成的kafka 进行安装调试,以及些样例代码,sparkstreaming 相关调用kafka 的代码使用的原始的api 而没有走zookeeper,虽然消费者能启动,但无法消费内容。 开始我使用shell下的zk方式是可以消费误认为kafka也是没有问题
分类:
其他好文 时间:
2018-08-08 11:07:00
阅读次数:
367
软件版本 Hadoop版本号:hadoop-2.6.0-cdh5.7.0; VMWare版本号:VMware 9或10 Linux系统:CentOS 6.4-6.5 或Ubuntu版本号:ubuntu-14.04.1-desktop-i386 Jdk版本号:Jdk1.7.0._79 后三项对版本要求... ...
分类:
其他好文 时间:
2018-07-22 15:19:52
阅读次数:
233