利用ELK+redis搭建一套nginx日志分析平台。logstash,elasticsearch,kibana怎么进行nginx的日志分析呢？首先，架构方面，nginx是有日志文件的，它的每个请求的状态等都有日志文件进行记录。其次，需要有个队列，redis的list结构正好可以作为队列使用。然后分析使用elasticsearch..
分类：
其他好文 时间：
2017-10-15 17:51:20
阅读次数：
219
A comprehensive log management and analysis strategy is vital, enabling organizations to understand the relationship between operational, security, an ...
分类：
数据库 时间：
2017-10-13 21:14:49
阅读次数：
279
这里记录Logstash配置中注意的事项： 整个配置文件分为三部分：input,filter,output。参考这里的介绍 https://www.elastic.co/guide/en/logstash/current/configuration-file-structure.html 1 在Wi ...
分类：
其他好文 时间：
2017-10-13 14:02:04
阅读次数：
185
思路： 一个小集群 1 各个节点之间以多播方式通信，且通过TCP的9300端口通信，基于节点名称通信。集群中必须定义一个主节点，用于管理集群。主节点会决定哪个shard是primary，且查找replica shard。如果集群中添加一个新的节点，那么shard均衡将会被ElasticSearch集 ...
分类：
其他好文 时间：
2017-10-12 17:49:35
阅读次数：
165
logstash: input:https://www.elastic.co/guide/en/logstash/current/input-plugins.html input { file { path =>"/var/log/messages" type => "system" start_p ...
分类：
数据库 时间：
2017-10-11 19:19:09
阅读次数：
222
Filebeat 安装参考 http://blog.csdn.net/kk185800961/article/details/54579376 elasticsearch 安装参考 http://blog.csdn.net/kk185800961/article/details/54175291 k ...
分类：
其他好文 时间：
2017-10-07 16:09:31
阅读次数：
364
MySQL数据库 Driver ="path/to/jdbc-drivers/mysql-connector-java-5.1.35-bin.jar" //驱动程序Class ="com.mysql.jdbc.Driver"; URL ="jdbc:mysql://localhost:3306/db ...
分类：
数据库 时间：
2017-09-29 23:01:43
阅读次数：
268
这里我演示的是在windows下的操作 首先下载logstash-5.6.1，直接去官网自行下载 1.需要创建如下jdbc.conf和myes.sql两个文件 myes.sql是里面你需要执行查询的SQL语句 SELECT * FROM [dbo].test 首先要启动elasticsearch， ...
分类：
数据库 时间：
2017-09-29 19:53:46
阅读次数：
225
再记录一下elk的搭建，个人觉得挺麻烦的，建议还是在linux系统下搭建，性能会好一些，但我是在windows下搭建的，还是记录一下吧，像我这种记性差的人还是得靠烂笔头 简介： ELK由ElasticSearch、Logstash和Kiabana三个开源工具组成： Elasticsearch是个开源 ...
参考网址：https://www.elastic.co/downloads组件：1、Filebeat客户端组件，用于收集log日志，发送至elasticsearch2、logstash：处理收集的日志3、elasticsearch：储存收集的日志4、kibana提供可视化的日志搜索平台一、概述Filebeat是一个日志文件托运工具，在你的服务器上安装..
分类：
其他好文 时间：
2017-09-29 00:37:56
阅读次数：
222
