使用codec的multiline插件实现多行匹配，这是一个可以将多行进行合并的插件，而且可以使用what指定将匹配到的行与前面的行合并还是和后面的行合并。 1.java日志收集测试 2.查看elasticsearch日志,已"["开头 3.配置logstash 4.启动 5.head插件查看 6. ...
分类：
编程语言 时间：
2018-05-29 13:16:48
阅读次数：
606
之前的文档介绍了ELK的架构基础知识，下面简单记录下ELK结合Redis搭建日志分析平台的集群环境部署过程，大致的架构如下： + Elasticsearch是一个分布式搜索分析引擎，稳定、可水平扩展、易于管理是它的主要设计初衷 + Logstash是一个灵活的数据收集、加工和传输的管道软件 + Ki ...
分类：
其他好文 时间：
2018-05-29 13:14:59
阅读次数：
339
一、简析ELK?ELK是三个开源软件的缩写，分别表示：Elasticsearch , Logstash, Kibana , 它们都是开源软件。?Elasticsearch：可以理解成一个仓库?Logstash：过滤器，分析器，重量级的日志收集工具?Kibana：图形化的展示，日志的进一步分析由于Logstash是个重量级的日志收集工具，会消耗大量的资源，所以
分类：
其他好文 时间：
2018-05-29 12:32:21
阅读次数：
150
0.实验环境说明 宿主机 Windows 10 工具 VMware v12.5 Pro 虚拟主机系统 CentOS 6.5 x64 ELK Elasticsearch v2.4.3 LogStash v2.4.1 Kibana v4.6.3 Windows 10 VMware v12.5 Pro C ...
分类：
其他好文 时间：
2018-05-27 10:42:51
阅读次数：
656
redis.conf配置文件详解 来自：http://www.cnblogs.com/zhang-ke/p/5981108.html ...
分类：
其他好文 时间：
2018-05-26 14:01:45
阅读次数：
145
从头搭建分布式日志系统，主要是在spring mvc上结合ELK套件实现（之前有些工作由于分工不同由不同的同事来完成，我只是在已经配置好的环境下做开发而已），包含如下这些技术点： spring mvc logback logstash elasticsearch kibana redis 来看下整体 ...
分类：
编程语言 时间：
2018-05-23 02:25:38
阅读次数：
286
【filebeat --> kafka --> logstash-->MongoDB|磁盘】架构进行日志收集 但是当logstash写入MongoDB有延迟，然后正常之后，会导致logstash循环收集kafka中的数据？ 请各位大虾指点，是什么原因会导致这种情况，谢谢！ 【PS】 我发现一个解决办 ...
分类：
其他好文 时间：
2018-05-22 18:26:42
阅读次数：
152
Logstash基本介绍和使用场景 自我认为：logstash就是日志的采集收集，日志的搬运工，实时去采集日志。读取不同的数据源，并进行过滤，开发者自定义规范输出到目的地。日志的来源很多，如系统日志，应用日志等等（同类软件：filebeat） 官方文档：https://www.elastic.co/ ...
分类：
其他好文 时间：
2018-05-22 17:22:26
阅读次数：
213
logstash的数据源为json，部分数据"level"=>{"levelStr"=>"ERROR","level"=>40000},"type"=>"community",一、用某个字段作为过滤条件filter{if[type]!="community"{drop{}}}二、用某个二级字段作为过滤条件filter{if[level][levelStr]!="ERROR"
分类：
其他好文 时间：
2018-05-19 17:05:13
阅读次数：
484
filebeat + logstash + elasticsearch + granfa https://www.cnblogs.com/wenchengxiaopenyou/p/9034213.html 一。背景 前端web服务器为nginx，采用filebeat + logstash + ela ...
分类：
其他好文 时间：
2018-05-19 14:02:44
阅读次数：
437
