Ambari Server 升级手册 * 注意事项: 升级Ambari Server需要重启HDP服务,重启HDP服务之前请关闭正在进行的业务服务(如:Mapreduce job),以免数据丢失; Ambari Server 2.0.0版本以后集成了新的运维监控服务Ambari Metrics,Na ...
分类:
其他好文 时间:
2016-06-14 17:36:58
阅读次数:
278
昨天的开启禁用的服务6.11server3开启服务——nagioshttpdserver4server3下载包ganglia-web-3.4.2.tar.gzlibconfuse-2.6-3.el6.x86_64.rpmlibconfuse-devel-2.6-3.el6.x86_64.rpmrrdtool-devel-1.3.8-6.el6.x86_64.rpmganglia-3.4.0.tar.gzyuminstall-yrpm-buildrumbuild-tbgan..
分类:
其他好文 时间:
2016-06-12 23:42:54
阅读次数:
287
经实验表明,多层gmetad与ganglia版本无关,且可以多版本兼容 测试 Ⅰ 如下 测试准备 *本测试共有两级gmetad,底层为一级gmetad,高层为二级gmetad,二级gmetad为3.1.7版本,一级gmetad为3.7.2版本 *为保证二级gemtad所收集到的指标信息确为一级gme ...
分类:
Web程序 时间:
2016-06-12 00:11:31
阅读次数:
269
1.准备安装包 ganglia-3.7.2-2.el6.x86_64.rpm ganglia-gmetad-3.7.2-2.el6.x86_64.rpm ganglia-gmond-3.7.2-2.el6.x86_64.rpm ganglia-gmond-python-3.7.2-2.el6.x86 ...
分类:
Web程序 时间:
2016-06-02 13:20:09
阅读次数:
501
1.1. RHEL/CentOS/Oracle Linux 6 On a server host that has Internet access, use a command line editor to perform the following steps: Log in to your ho ...
分类:
其他好文 时间:
2016-05-18 17:33:57
阅读次数:
125
Ganglia环境搭建并监控Hadoop分布式集群
简介
Ganglia可以监控分布式集群中硬件资源的使用情况,例如CPU,内存,网络等资源。通过Ganglia可以监控Hadoop集群在运行过程中对集群资源的调度,作为简单地运维参考。
环境搭建流程
1、我们先在主机master01上面搭建好Ganglia环境
2、在master01主机上解...
分类:
其他好文 时间:
2016-05-12 18:08:59
阅读次数:
269
Kylin是一个开源的分布式的OLAP分析引擎,基于Hadoop提供SQL接口和OLAP接口,支持TB到PB级别的数据量。Kylin环境搭建前,需要安装JDK,MySQL,Tomcat,Hadoop,HBase,Hive,ZooKeeper等软件。由于我们使用Ambari对集群进行管理,所以这些工作 ...
分类:
其他好文 时间:
2016-05-10 18:27:52
阅读次数:
5908
由于默认的centos的库是不存在ganglia的相关软件,因此要重新配置yum的库 配置yum库 yum install yum-priorities 安装Epel 此处是64位centos rpm -Uvh http://dl.fedoraproject.org/pub/epel/6/x86_6 ...
分类:
其他好文 时间:
2016-04-26 10:54:56
阅读次数:
115
我们知道jmx可以将程序内部的信息暴露出来,但是要想监控这些信息的话,就还需要自己写java程序调用jmx接口去获取数据,并按照某种格式发送到其他地方(如监控程序zabbix,ganglia)。这时jmxtrans就派上用场了,jmxtrans的作用是自动去jvm中获取所有jmx格式数据,并按照某种 ...
分类:
其他好文 时间:
2016-04-20 13:06:53
阅读次数:
790
主要介绍Hadoop家族产品,常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa,新增加的项目包括,YARN,Hcatalog,Oozie,Cassandra,Hama,Whirr,Flume,Bigtop,Crunch,Hue等。从2011年开始,中国进入大数据风起云涌的时代,以Hadoop为代表的家族软件..
分类:
其他好文 时间:
2016-04-19 20:20:22
阅读次数:
335