ELK·Elastic Stack Elastic Stack就一套日志分析系统,前身叫ELK。 E:Elasticsearch L:Logstash,日志收集系统 K:Kibana,数据可视化平台 现加入Beats,是一个数据采集器,可以直接上报给elasticsearch,也可以通过logsta ...
分类:
其他好文 时间:
2020-05-26 00:52:11
阅读次数:
309
本文介绍如何监控k8s服务层event及报警 问题 应用或服务部署到k8s集群时,首先会经过k8s的调度,这个过程可能会出现一些问题,比如 volume 无法正常挂载,没有足够的资源部署服务,服务异常退出等。 如何及时了解这些问题,保证服务正常运行? 监控层级 监控k8s集群,大致分为下面3个层级: ...
分类:
其他好文 时间:
2020-05-25 12:43:44
阅读次数:
116
本节探讨定时任务,定时任务的应用场景是非常多的,比如: 闹钟程序或任务提醒,指定时间叫床或在指定日期提醒还信用卡 监控系统,每隔一段时间采集下系统数据,对异常事件报警 统计系统,一般凌晨一定时间统计昨日的各种数据指标 在Java中,有两种方式实现定时任务: 使用java.util包中的Timer和T ...
分类:
编程语言 时间:
2020-05-25 12:14:17
阅读次数:
58
地震形变监测仪器常常因降雨等原因,产生限幅,需要人工干预进行调零。因没有自动报警监控软件,影响监测数据的连续率。 利用python开发了这个小软件,实现了水管仪,伸缩仪,垂直摆等3类形变监测数据监控功能,数据限幅会自动报警,台站应用 此软件可提高形变数据的连续率。 import requests i ...
分类:
其他好文 时间:
2020-05-24 20:50:38
阅读次数:
57
[toc] 一、故障原因 1.1.1 事故原因 1. 今天中午吃饭的时候,突然接到报警信息,web集群中服务节点中有一台web服务器停止了工作,当时不知道是什么原因,后来问了才知道是机房突然断电导致的。 1.1.2 环境模拟图 1. 故障图 2. 报错原因 就是XFS文件系统有损坏,在1664行和9 ...
分类:
其他好文 时间:
2020-05-24 13:22:05
阅读次数:
75
简略介绍: Logstash是elastic技术栈中的一员。它是一个数据采集引擎,可以从数据库采集数据到es中。我们可以通过设置自增id主键或者时间来控制数据的自动同步,这个id或者时间就是用于给logstash进行识别哪些数据需要同步的。 使用ID的方式,假设表中有1000条数据,Logstats ...
分类:
其他好文 时间:
2020-05-24 11:22:32
阅读次数:
75
【题目描述】 阿福是一名经验丰富的大盗。趁着月黑风高,阿福打算今晚洗劫一条街上的店铺。 这条街上一共有 N 家店铺,每家店中都有一些现金。阿福事先调查得知,只有当他同时洗劫了两家相邻的店铺时,街上的报警系统才会启动,然后警察就会蜂拥而至。 作为一向谨慎作案的大盗,阿福不愿意冒着被警察追捕的风险行窃。 ...
分类:
其他好文 时间:
2020-05-23 18:41:19
阅读次数:
137
基本流程:1)Logstash-Shipper获取日志信息发送到redis。2)Redis在此处的作用是防止ElasticSearch服务异常导致丢失日志,提供消息队列的作用。[注意,测试时如果写到redis里的日志量比较小,则很快就会被输送到elasticsearch,输送完之后,届时在redis ...
分类:
其他好文 时间:
2020-05-23 18:22:13
阅读次数:
84
一、 现象 用户打开消息推送有概率报错,后续发现推送消息阅读数、点赞数无法正常更新,mysql报警有行锁, DBA抓到有锁表语句,kill该语句未正常恢复,elk日志有大量的java.sql.SQLException: connection holder is null 重启应用恢复 二、分析 根据 ...
分类:
其他好文 时间:
2020-05-23 16:53:18
阅读次数:
50
1.安装Kibana 服务器角色 主机名 ip 服务 elk1 192.168.1.223 jdk1.8,es7.2,logstash, elk2 192.168.1.224 jdk1.8,es7.2,elasticsearch-head, kibana,cerebro elk3 192.168.1 ...
分类:
其他好文 时间:
2020-05-23 16:16:53
阅读次数:
54