码迷,mamicode.com
首页 > 其他好文 > 详细

CDH5.12.1 安装部署

时间:2018-10-13 18:09:34      阅读:293      评论:0      收藏:0      [点我收藏+]

标签:解决方案   服务安装   搜索   alt   ima   用户模式   完成   arc   令行   

 

 

###通过http://192.168.50.200:7180/cmf/login 访问CM控制台

技术分享图片

4.CDH安装

4.1CDH集群安装向导

1.admin/admin登陆到CM

2.同意license协议,点击继续

技术分享图片

3.选择60试用,点击继续

技术分享图片

4.点击“继续”

技术分享图片

5.输入主机IP或者名称,点击搜索找到主机名后点击继续

技术分享图片

6.点击“继续”

技术分享图片

7.使用parcel选项,点击“更多选项”,点击“-”删除其他所有的地址,输入http://ip-192-168-50-200.hns.com/cdh5.12.1/点击“保存更改”

技术分享图片

8.选择自定义存储库,输入cm的http地址

技术分享图片

9.点击“继续”,进入下一步安装jdk

 技术分享图片

10.点击“继续”,进入下一步,默认多用户模式

技术分享图片

11.点击“继续”,进入下一步配置ssh账号密码:

技术分享图片

12.点击“继续”,进入下一步,安装Cloudera Manager相关到各个节点

技术分享图片

技术分享图片

13.点击“继续”,进入下一步安装cdh到各个节点

技术分享图片

技术分享图片

14.点击“继续”,进入下一步主机检查,确保所有检查项均通过

技术分享图片

技术分享图片

上述的解决方案:

在每台机器上执行如下操作:

[root@ip-192-168-50-200 ~]# echo never > /sys/kernel/mm/transparent_hugepage/enabled
[root@ip-192-168-50-200 ~]# echo never > /sys/kernel/mm/transparent_hugepage/defrag

[root@ip-192-168-50-200 ~]# echo "vm.swappiness = 10" >> /etc/sysctl.conf

[root@ip-192-168-50-200 ~]# sysctl -p

 技术分享图片

技术分享图片

点击完成进入服务安装向导!!!

4.2 集群设置安装向导

1.选择需要安装的服务,此处使用自定义服务,如下图

技术分享图片

技术分享图片

2.点击“继续”,进入集群角色分配

HDFS角色分配:

技术分享图片

Hive角色分配:

技术分享图片

Cloudera Manager Service 角色分配:

技术分享图片

Spark角色分配:(Spark on Yarn 所以没有spark的master和worker 角色)

技术分享图片

Yarn角色分配:

技术分享图片

Zookeeper角色分配:(至少3个Server)

技术分享图片

3.角色分配完成点击“继续”,进入下一步,测试数据库连接

 技术分享图片

技术分享图片

4.测试成功,点击“继续”,进入目录设置,此处使用默认默认目录,根据实际情况进行目录修改

技术分享图片

技术分享图片

技术分享图片

5.点击“继续”,等待服务启动成功!!!

技术分享图片

技术分享图片

6.点击“继续”,显示集群安装成功!

技术分享图片

7.安装成功后,进入home管理界面

技术分享图片

5.快速组建服务验证

5.1HDFS验证(mkdir+put+cat +get)

mkdir操作:

技术分享图片

put 操作:

技术分享图片

技术分享图片

cat 操作:

技术分享图片

get 操作:

技术分享图片

5.2 Hive 验证

使用hive命令行操作

技术分享图片

 

CDH5.12.1 安装部署

标签:解决方案   服务安装   搜索   alt   ima   用户模式   完成   arc   令行   

原文地址:https://www.cnblogs.com/shanhua-fu/p/9783504.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!