背景有一个4台机器的分布式服务,不多不少,上每台机器上查看日志比较麻烦,用Flume,Logstash、ElasticSearch、Kibana等分布式日志管理系统又显得大材小用,所以想到了centos自带的rsyslog。简介Rsyslog可以简单的理解为syslog的超集,在老版本的Linux系统中,RedHatEnterpris..
分类:
其他好文 时间:
2017-05-18 20:27:19
阅读次数:
306
ELK+redis搭建日志分析平台1.ELK简介ELKStack即Elasticsearch+Logstash+Kibana。日志监控和分析在保障业务稳定运行时,起到了很重要的作用。比如对nginx日志的监控分析,nginx是有日志文件的,它的每个请求的状态等都有日志文件进行记录,所以可以通过读取日志文件来分析;redi..
分类:
其他好文 时间:
2017-05-18 20:06:18
阅读次数:
240
2017-05-15 12:06:17 INFO me.cinyi.imapp.push.commons.iospush - 用户ID[1000]-标识[11500], admin推送通知成功, messages:[6921]ms ...
分类:
其他好文 时间:
2017-05-18 17:28:59
阅读次数:
285
通过logstash过滤nginx-error日志,筛选日志中比较严重报错,并进行报警。由于网络上很多帖子都是要么写了怎么筛选报错,要么就只翻译了logstash-zabbix-output插件的使用说明,并没有一个完整的配置,整个项目做完,整理出来供大家阅读。【软件版本】zabbix版本:2.4.8logstas..
分类:
其他好文 时间:
2017-05-17 15:15:22
阅读次数:
3241
一、简介 1、核心组成 ELK由Elasticsearch、Logstash和Kibana三部分组件组成; Elasticsearch是个开源分布式搜索引擎,它的特点有:分布式,零配置,自动发现,索引自动分片,索引副本机制,restful风格接口,多数据源,自动搜索负载等。 Logstash是一个完 ...
分类:
其他好文 时间:
2017-05-13 16:54:42
阅读次数:
2044
最近rancher平台上docker日志收集捣腾挺久的,尤其在配置上,特写下记录 Unix/Linux系统中的大部分日志都是通过一种叫做syslog的机制产生和维护的。syslog是一种标准的协议,分为客户端和服务器端,客户端是产生日志消息的一方,而服务器端负责接收客户端发送来的日志消息,并做出保存 ...
分类:
其他好文 时间:
2017-05-13 00:32:11
阅读次数:
612
介绍Elasticsearch是ELK(Elasticsearch/Logstash/Kibana)的基石。在这篇文章中,我们将使用RancherCatalog来部署stack,并将它用于追踪Twitter上的tag和brand。追踪Twitter上的hashtag对于衡量基于Twitter的营销活动的影响力是非常有用的。你可以从中提取出诸如您的推文被转..
分类:
其他好文 时间:
2017-05-11 14:29:22
阅读次数:
203
一、介绍 The Elastic Stack - 它不是一个软件,而是Elasticsearch,Logstash,Kibana 开源软件的集合,对外是作为一个日志管理系统的开源方案。它可以从任何来源,任何格式进行日志搜索,分析获取数据,并实时进行展示。像盾牌(安全),监护者(警报)和Marvel( ...
分类:
其他好文 时间:
2017-05-08 14:38:08
阅读次数:
369
一、介绍TheElasticStack-它不是一个软件,而是Elasticsearch,Logstash,Kibana开源软件的集合,对外是作为一个日志管理系统的开源方案。它可以从任何来源,任何格式进行日志搜索,分析获取数据,并实时进行展示。像盾牌(安全),监护者(警报)和Marvel(监测)一样为你的产..
分类:
其他好文 时间:
2017-05-08 14:13:19
阅读次数:
181
1、server.conf文件[elk@logserverbin]$catserver.conf
input{
redis{
host=>"10.10.45.200"
data_type=>"list"
key=>"elk_frontend_access:redis"
port=>"5379"
}
}
output{
if"_grokparsefailure"in[tags]{
}else{
if[type]=="www1_access"{
elasticsearch{
host..
分类:
其他好文 时间:
2017-05-06 17:37:04
阅读次数:
3053