ELK是三个开源软件的缩写,分别表示:Elasticsearch , Logstash, Kibana , 它们都是开源软件。新增了一个FileBeat,它是一个轻量级的日志收集处理工具(Agent),Filebeat占用资源少,适合于在各个服务器上搜集日志后传输给Logstash,官方也推荐此工具。Elasticsearch是个开源分布式搜索引擎,提供搜集、分析、存储数据三大功能。它的特点有:分
分类:
其他好文 时间:
2018-08-13 18:08:01
阅读次数:
195
一、ProxySQL的运行机制ProxySQL有一个完备的配置系统,配置ProxySQL是基于sql命令的方式完成的。ProxySQL支持配置修改之后的在线保存、应用,不需要重启即可生效。整个配置系统分三层设计。整个配置系统分为三层,如下图所示:配置系统分为三层的目的有三个:(1).自动更新(2).尽可能的不重启proxysql就可以修改配置(3).方便回滚错误配置每层的功能与含义如下:?RUNT
分类:
数据库 时间:
2018-08-13 14:54:37
阅读次数:
194
ES的资源: https://www.elastic.co/guide/en/elasticsearch/reference/current/getting-started.htmlhttps://www.elastic.co/webinars/getting-started-kibana?baym ...
分类:
其他好文 时间:
2018-08-12 22:50:16
阅读次数:
271
ELK日志平台搭建整体架构整体架构主要分为5个模块,分别提供不同的功能:Filebeat:轻量级数据收集引擎。基于原先Logstash-fowarder的源码改造出来。是ELKStack在Agent的第一选择。<br><br>Kafka:数据缓冲队列。作为消息队列解耦了处理过程,同时提高了可扩展性。具有峰值处理能力,使用消息队列能够使关键组件顶住突发的访问压力,而不会因为突
分类:
其他好文 时间:
2018-08-11 20:54:40
阅读次数:
247
Centos7部署ELK日志收集系统一、ELK概述:ELK是一组开源软件的简称,其包括Elasticsearch、Logstash和Kibana。ELK最近几年发展迅速,已经成为目前最流行的集中式日志解决方案。Elasticsearch:能对大容量的数据进行接近实时的存储,搜索和分析操作。本项目中主要通过Elasticsearch存储所有获取的日志。Logstash:数据收集引擎,它支持动态的的从
分类:
系统相关 时间:
2018-08-09 17:31:06
阅读次数:
300
在工作中需要在elk中展示tomcat的日志,对其进行分析,报错排查及其它定制需求;下面为catalina.out日志样例,以此为样本进行字段的解析;2018-08-08?00:00:16,728?INFO?[com.staples.adv.action.BaseShopAction]?-?<*********entry?metho
分类:
其他好文 时间:
2018-08-08 16:42:34
阅读次数:
327
elk+redis+filebeat收集docker+swarm日志分析
分类:
其他好文 时间:
2018-08-08 11:09:52
阅读次数:
249
1、修改ssh配置 [root@elk-node2 ~]# vim /etc/ssh/sshd_config 大概132行把下面这个句注释掉 #Subsystem sftp /usr/libexec/openssh/sftp-server添加以下内容 Subsystem sftp /usr/libe ...
分类:
其他好文 时间:
2018-08-06 00:35:12
阅读次数:
519
使用beats采集日志 之前也介绍过beats是ELK体系中新增的一个工具,它属于一个轻量的日志采集器,以上我们使用的日志采集工具是logstash,但是logstash占用的资源比较大,没有beats轻量,所以官方也推荐使用beats来作为日志采集工具。而且beats可扩展,支持自定义构建。 官方 ...
分类:
其他好文 时间:
2018-08-03 14:47:43
阅读次数:
456
为满足研发可视化查看测试环境日志的目的,准备采用EK+filebeat实现日志可视化(ElasticSearch+Kibana+Filebeat)
分类:
其他好文 时间:
2018-07-30 18:05:53
阅读次数:
242