Alertmanager提供了方式可以帮助用户控制告警通知的行为，包括预先定义的抑制机制和临时定义的静默规则。 抑制机制 Alertmanager的抑制机制可以避免当某种问题告警产生之后用户接收到大量由此问题导致的一系列的其它告警通知。例如当集群不可用时，用户可能只希望接收到一条告警，告诉他这时候集 ...
分类：
其他好文 时间：
2020-07-20 13:17:24
阅读次数：
118
通过PromQL可以实时对Prometheus中采集到的样本数据进行查询，聚合以及其它各种运算操作。而在某些PromQL较为复杂且计算量较大时，直接使用PromQL可能会导致Prometheus响应超时的情况。 这时需要一种能够类似于后台批处理的机制能够在后台完成这些复杂运算的计算，对于使用者而言只 ...
分类：
其他好文 时间：
2020-07-20 13:08:34
阅读次数：
54
zabbix邮箱告警 环境说明： zabbix服务端 192.168.32.136 zabbix客户端 192.168.32.125 Zabbix监控服务端、客户端都已经部署完成，被监控主机已经添加，Zabiix运行正常。 邮件报警有两种情况： 1、Zabbix服务端只是单纯的发送报警邮件到指定邮箱 ...
分类：
其他好文 时间：
2020-07-19 17:56:45
阅读次数：
75
一、申请钉钉账号，登录账号。二、创建一个告警群组，添加一个自定义机器人三，监控脚本配置（首先找到alertscripts目录）在/usr/local/zabbix/share/zabbix/alertscripts目录下面创建脚本，名称为zabbix_dingding.py脚本的内容如下：#!/usr/bin/envpython#coding:utf-8importrequests,json,sy
分类：
其他好文 时间：
2020-07-19 11:24:28
阅读次数：
79
1，部署Alertmanager 启动端口为:9093 2，配置Prometheus与Alertmanager通信 2-1 在Alertmanager 部署机器，设置Alertmanager告警的接受方式。 [root@centos7 alert]# cat alertmanager.yml glo ...
分类：
其他好文 时间：
2020-07-18 22:13:31
阅读次数：
70
这个是我一直不想写的，嫌麻烦。还有就是这么多大神，我还差得远，不过是为了通过输出更好的理解这些知识。 介绍 Prometheus 是一个时序数据库，可以存储它通过 exporters 抓取回来的监控数据。那这些数据怎么去查询呢？比如MySQL有SQL语句，那Prometheus有啥呢？ PromQL ...
分类：
其他好文 时间：
2020-07-18 15:35:57
阅读次数：
303
在Prometheus Server中定义告警规则以及产生告警，Alertmanager组件则用于处理这些由Prometheus产生的告警。Alertmanager即Prometheus体系中告警的统一处理中心。 Prometheus告警简介 告警能力在Prometheus的架构中被划分成两个独立的 ...
分类：
其他好文 时间：
2020-07-15 23:27:05
阅读次数：
102
背景 目前 机器学习平台 后端采用k8s架构进行GPU和CPU资源的调度和容器编排。总所周知，k8s的后端核心存储使用etcd进行metadata持久化存储。机器学习平台采取[External etcd topology](http://way.xiaojukeji.com/article/Exte ...
分类：
其他好文 时间：
2020-07-15 23:14:34
阅读次数：
90
告警 正在开会，突然钉钉告警声响个不停，同时市场人员反馈客户在投诉系统登不进了，报504错误。查看钉钉上的告警信息，几台业务服务器节点全部报CPU超过告警阈值，达100%。 赶紧从会上下来，SSH登录服务器，使用 top 命令查看，几个Java进程CPU占用达到180%，190%，这几个Java进程 ...
分类：
其他好文 时间：
2020-07-14 20:06:37
阅读次数：
82
告警对象的信息还需要用JavaScript处理，添加预处理步骤javascript
分类：
编程语言 时间：
2020-07-14 13:19:09
阅读次数：
52
