介绍通过利用filebeat来收集mysql的慢查询日志，logstash解析后推送到elasticsearch，并创建自定义的索引，最终通过kibana进行web展示。环境介绍：操作系统版本：CentOSLinuxrelease7.3.1611(Core)64bitMysql版本：5.6.28Logstash版本:logstash5.3.0Elasticsearch版本：elastic..
分类：
数据库 时间：
2017-04-21 15:01:58
阅读次数：
3759
Flume配置 。 flume生成的数据结构 <span style="font-size:18px;">"_index" : "logstash-2013.01.07", "_type" : "tms_jboss_syslog", "_id" : "a_M9X_0YSpmE7A_bEzIFiw", ...
分类：
Web程序 时间：
2017-04-16 11:14:52
阅读次数：
233
log服务器安装ELK,客户端安装filebeat 1.下载安装包（https://www.elastic.co/downloads） 2.安装JDK(要求:1.8以上) 3.安装el 4.安装kibana 5.安装logstash cat /etc/logstash/conf.d/log_coll ...
分类：
其他好文 时间：
2017-04-14 14:24:50
阅读次数：
308
原本使用logstash是无法读取/root/.bash_history的。这里用了一个比较巧妙的方法，将history命令记录在message中，然后再使用logstash来读取。 我们需要在/etc/profile中最后加入一行： /var/log/message效果如下 ...
分类：
其他好文 时间：
2017-04-13 01:04:01
阅读次数：
338
既然logstash在收集日志的时候可以分析到clientip来自于那个国家城市及其坐标，那么肯定可以通过这些信息绘制在地图上直观的表现出来。awstats是可以做到的，但是nginx的日志格式及内容一旦修改就无法分析了。首先有两样必须先安装好：#/opt/logstash/bin/logstash-plugininsta..
分类：
其他好文 时间：
2017-04-12 18:54:50
阅读次数：
513
安装elk安装Java1.8环境解压源码安装包：tarxfjdk-8u121-linux-x64.tar.gz
ll
mkdir/work/opt-p
mvjdk1.8.0_121/work/opt/jdk
ll/work/opt/jdk/
chown-Rroot.root/work/opt
vim/etc/profile://添加
exportJAVA_HOME=/work/opt/jdk
exportJAVA_BIN=$JAVA_HOME/bin
exportJRE_HO..
分类：
其他好文 时间：
2017-04-12 18:52:45
阅读次数：
266
ELK平台介绍在搜索ELK资料的时候，发现这篇文章比较好，于是摘抄一小段：以下内容来自：http://baidu.blog.51cto.com/71938/1676798日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置过程中的错误及错误发生的原因..
分类：
其他好文 时间：
2017-04-12 18:52:12
阅读次数：
363
Elasticsearch是实时全文搜索和分析引擎，提供搜集、分析、存储数据三大功能；是一套开放REST和JAVAAPI等结构提供高效搜索功能，可扩展的分布式系统。它构建于ApacheLucene搜索引擎库之上。Logstash是一个用来搜集、分析、过滤日志的工具。它支持几乎任何类型的日志，包括系统..
分类：
其他好文 时间：
2017-04-12 05:24:15
阅读次数：
278
安装详情参见：http://mojijs.com/2017/03/222639/index.html http://www.jianshu.com/p/8516e51e105d ...
分类：
数据库 时间：
2017-04-12 02:29:48
阅读次数：
308
rsyslog是日志收集工具。如今非常多Linux都自带rsyslog，用其替换掉syslog。怎样安装rsyslog就不讲了。大概讲下原理。然后讲logstash的相关配置。 rsyslog本身有一个配置文件 /etc/rsyslog.conf，里面定义了日志文件。以及对应保存的地址。下面述语句为 ...
分类：
其他好文 时间：
2017-04-11 01:14:17
阅读次数：
433
