前言 logstash是ELK日志系统中的一部分,主要承担将收集完成日志进行过滤,并且输出到es的职责。 logstash本身也可以作为客户端部署到应用系统的服务器上进行日志收集,但是由于资源开销占用过大,所以客户端的收集工作交给了beats进行,logstash专心在独立的服务器上完成日志解析处理 ...
分类:
其他好文 时间:
2019-04-12 14:57:49
阅读次数:
185
Spring Boot整合Elasticsearch Spring Boot整合Elasticsearch Elasticsearch是一个全文搜索引擎,专门用于处理大型数据集。根据描述,自然而然使用它来存储和搜索应用程序日志。与Logstash和Kibana一起,它是强大的解决方案Elastic ...
分类:
编程语言 时间:
2019-04-11 16:35:32
阅读次数:
1961
logstash写入到kafka和从kafka读取日志
分类:
其他好文 时间:
2019-04-09 16:43:44
阅读次数:
497
1.rsyslog##syslog是Linux系统默认的日志守护进程。默认的syslog配置文件是/etc/syslog.conf文件。程序,守护进程和内核提供了访问系统的日志信息。采集系统日志。2.rsyslog的管理/var/log/messages##服务信息日志/var/log/secure##系统登陆日志例如:pop3,ssh,telnet,ftp等都会记录在此./var/log/cro
分类:
系统相关 时间:
2019-04-09 09:25:07
阅读次数:
182
这篇博客讲的是elasticsearch+logstash+kibana部署的方法。 内容大纲: 1、elasticsearch+logstash+kibana部署 2、收集Tomcat日志 3、收集tcp日志 一、elasticsearch+logstash+kibana部署 1、elastics ...
分类:
其他好文 时间:
2019-04-05 19:41:23
阅读次数:
227
ELK之logstash系统日志和nginx日志收集-4
分类:
其他好文 时间:
2019-04-03 13:59:07
阅读次数:
133
场景需求 在使用ELK对日志进行收集的时候,如果需要对数据进行存档,可以考虑使用数据库的方式。为了便于查询,可以同时写一份数据到Elasticsearch 中。 环境准备 CentOS7系统: 192.168.20.60 node1 Kibana ES Logstash Nginx 192.168. ...
分类:
数据库 时间:
2019-04-01 16:59:35
阅读次数:
218
查看官方文档 https://www.elastic.co/guide/en/logstash/current/plugins-inputs-file.html 找个路径 /home/data/logstash/logstash/config 创建 vi file.config input { fi ...
分类:
其他好文 时间:
2019-04-01 14:12:00
阅读次数:
439