ELK搭建实时日志分析平台之二Logstash和Kibana搭建 ...
分类：
其他好文 时间：
2018-02-28 14:13:46
阅读次数：
2387
Logstash提供了一系列filter过滤plugin来处理收集到的log event，根据log event的特征去切分所需要的字段，方便kibana做visualize和dashboard的data analysis。所有logstash支持的event切分插件查看这里。下面我们主要讲grok ...
分类：
其他好文 时间：
2018-02-27 13:22:43
阅读次数：
270
前言 最近用到了ELK的集群，想想还是用使用官方的x-pack的monitor功能对其进行监控，这里先上图看看： 环境如下： 操作系统： window 2012 R2 ELK ： elasticsearch 5.6.0 ， Logstash 5.6.0 , Kibana 5.6.0 x-pack安装 ...
分类：
其他好文 时间：
2018-02-25 14:45:41
阅读次数：
294
rsyslog特性：CentOS6和71，多线程2，支持UDP,TCP,SSL,TLS,RELP?MySQL,PGSQL,3，Oracle实现日志存储4，强大的过滤器，可实现过滤记录日志信息中任意部分5，自定义输出格式6，ELK：elasticsearch,logstash,kibana7，非关系型分布式数据库8，基于apache软件基金会jakarta项目组的项目lucene9，Elastics
分类：
其他好文 时间：
2018-02-22 19:53:12
阅读次数：
242
在ELK中因为logstash是在jvm上跑的，资源消耗比较大，对机器的要求比较高。而Filebeat是一个轻量级的logstash-forwarder，在服务器上安装后，Filebeat可以监控日志目录或者指定的日志文件，然后将这些信息到发送给logstarsh或直接发送给elasticsearc ...
分类：
其他好文 时间：
2018-02-12 18:46:22
阅读次数：
267
转载：http://blog.csdn.net/jek123456/article/details/65658790 在某个Logstash的场景下，我产生了为什么不能用Flume代替Logstash的疑问，因此查阅了不少材料在这里总结，大部分都是前人的工作经验下，加了一些我自己的思考在里面，希望对 ...
分类：
Web程序 时间：
2018-02-11 19:51:33
阅读次数：
296
一、下载地址 官网：https://www.elastic.co/cn/downloads/logstash 百度云盘： 二、安装 配置文件（配置文件放哪个目录都可以，在启动Logstash时可以指定配置文件位置） 启动（到bin目录下） ./logstash -f k_es.conf ...
分类：
其他好文 时间：
2018-02-11 16:11:51
阅读次数：
179
最近生产环境有个设备磁盘空间达到97%以上。 通过排查发现logstash产生的nohup.out文件有20Gb。 该日志是生产上一个重要的kafka消息消费程序，程序不能停止。而使用删除命令 删除日志肯定不起作用，日志被logstash程序占用。 通过使用 发现日志果然被logstash程序占用。 ...
分类：
其他好文 时间：
2018-02-06 14:19:48
阅读次数：
248
