背景：最近根据公司要求，需要一个能够监控主机CPU、内存、网络等资源情况的工具，由此想到了Ganglia。然后看了下部署方式，实在看得头大，安装过程非常繁琐，并且依赖问题也是比较烦人，于是有了这文章。废话不多说，直接开干！第一步：搜索可用镜像dockersearchganglia这里我们就选这个star最多的第二步：部署容器将镜像直接pull下来（亲测可用），直接运行dockerrun-d--na
分类：
其他好文 时间：
2019-10-24 17:12:37
阅读次数：
150
参见 HDP2.4安装(五)：集群及组件安装 ，安装配置的spark版本为1.6, 在已安装HBase、hadoop集群的基础上通过 ambari 自动安装Spark集群，基于hadoop yarn 的运行模式。 目录： Spark集群安装 参数配置 测试验证 Spark集群安装： 在ambari ...
分类：
其他好文 时间：
2019-10-02 01:00:23
阅读次数：
123
Ganglia 由 gmond、gmetad 和 gweb 三部分组成。 gmond（Ganglia Monitoring Daemon）是一种轻量级服务，安装在每台需要收集指标数据的节点主机上。使用 gmond，你可以很容易收集很多系统指标数据，如 CPU、内存、磁盘、网络和活跃进程的数据等。 g ...
分类：
Web程序 时间：
2019-10-01 18:34:26
阅读次数：
146
一、智能运维监控报警平台的组成 随着大数据时代的来临，运维工作的难度越来越大，每个运维人员都要面临不计其数的服务器和海量的数据，如何保证众多服务器和业务系统稳定高效地运行并尽量减少死机时间，成为考核运维工作的重要指标，而要实现大规模的运维，必须要有一套行之有效的智能运维监控管理系统，本章就详细介绍下 ...
分类：
其他好文 时间：
2019-08-31 23:50:41
阅读次数：
263
一、什么是Ganglia 对于这个工具，大家可能比较陌生，但是它功能非常强大，如果我们想收集所有服务器、网络设备的数据，那么ganglia绝对是首选，在深入学习之前，还是先从基础概念了解起吧！ Ganglia是一款为HPC（高性能计算）集群而设计的可扩展的分布式监控系统，它可以监视和显示集群中的节点 ...
分类：
其他好文 时间：
2019-08-31 23:33:21
阅读次数：
117
Ambari简介 Ambari概述 Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的创建、管理和监控。Ambari已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop和Hcatalog等； ...
分类：
其他好文 时间：
2019-08-20 10:40:13
阅读次数：
119
一、问题描述 日志文件信息如下： 二、解决办法一 i. 删除 yarn-nm-state 目录的所有文件再次启动 ii. 再次启动 NodeManager 组件 我这里使用的是 Ambari 来管理的，直接就Web界面操作，也可以使用命令操作启动。 iii. 查看是否启动成功，已启动成功 三、解决办 ...
分类：
其他好文 时间：
2019-08-08 13:32:07
阅读次数：
86
echo‘{"topics":[{"topic":"test1"},{"topic":"test2"}],"version":1}‘>ready-move-topics.json/usr/hdp/current/kafka-broker/bin/kafka-reassign-partitions.sh--zookeeperagent01.ambari.com:2181,agent02.amb
分类：
其他好文 时间：
2019-08-02 16:41:04
阅读次数：
79
迁移准备配置系统环境配置新服务器的系统环境，与旧Ambari-Server节点服务器一致；主要有以下几个方面：1、基础系统依赖；/usr/bin/yuminstallzlibzlib-devellibjpeglibjpeg-devellibpnglibpng-develgdgd-develcurlcurl-develfreetypefreetype-devellibxsltlibxslt-deve
分类：
其他好文 时间：
2019-07-25 20:32:25
阅读次数：
462
参考博客：做了五年大数据开发工程师总结的的大数据学习路线 大数据的4V特征： 常见的大数据的开源框架： 第一章：初识Hadoop 1.1 学会百度与Google 不论遇到什么问题，先试试搜索并自己解决。Google首选，翻不过去的，就用百度吧。 1.2 参考资料首选官方文档 特别是对于入门来说，官方 ...
分类：
其他好文 时间：
2019-07-21 18:02:21
阅读次数：
107
