在经过了近半个月的ELK环境的搭建配置,我做了我个人的工作总结,和大家分享一下。一、命令总结1.1、Es服务端口查看#netstat-nlpt|grep-E"9200|9300"1.2、Es插件安装和移除#./bin/plugininstallfile:///home/apps/license-2.3.3.zip#./bin/plugininstallfile:///home/apps/marv..
分类:
其他好文 时间:
2016-09-21 23:20:54
阅读次数:
368
1、简介对于日志来说,最常见的需求就是收集、查询、显示,正对应logstash、elasticsearch、kibana的功能。ELK日志系统在系统中,主要可解决的问题:基于日志的数据挖掘问题排查,上线检查根据关键字查询日志详情异常数据自动触发消息通知服务器监控,应用监控,Bug管理统计分..
分类:
其他好文 时间:
2016-09-21 00:14:48
阅读次数:
277
实际中最好用的日志框架是logback,我们现在会直接使用logback通过tcp协议向logstash-shipper输入日志数据。在上一节的基础上修改!!! 一、代码 1、pom.xml 2、application.properties 3、LogstashProperties.java 4、L ...
分类:
其他好文 时间:
2016-09-21 00:03:53
阅读次数:
274
常用的输入插件: tcp redis 一、tcp 1、用法 2、常用配置 以上port是必选项,其他是可选项。 二、redis 1、用法 2、配置 以上选项全部为可选项。 data_type: list:blpop channel:subscribe pattern_channel:psubscri ...
分类:
其他好文 时间:
2016-09-20 00:20:27
阅读次数:
145
最常用的两个输出插件: redis es 一、redis 1、用法 2、配置项 以上所有配置项都是可选的,没有必须的。(以下4个红色配置是最重要的4个配置) 批处理类(仅用于data_type为list) batch:设为true,通过发送一条rpush命令,存储一批的数据 默认为false:1条r ...
分类:
其他好文 时间:
2016-09-20 00:20:10
阅读次数:
264
初探ELK-filebeat使用小结2016/9/18
一、安装
1、下载
有2种方式下载,推荐缓存rpm包到本地yum源
1)直接使用rpm
[root@vm49~]#curl-L-Ohttps://download.elastic.co/beats/filebeat/filebeat-1.3.1-x86_64.rpm
2)使用yum源
[root@vm49~]#rpm--importhttps://packages.elasti..
分类:
其他好文 时间:
2016-09-18 21:20:59
阅读次数:
4950
logstash服务启动脚本 最近在弄ELK,发现logstash没有sysv类型的服务启动脚本,于是按照网上一个老外提供的模板自己进行修改 如有不对的地方,欢迎大家拍砖o(∩_∩)o 本文版权归作者所有,未经作者同意不得转载。 ...
分类:
其他好文 时间:
2016-09-14 12:17:16
阅读次数:
161
Logstash 是一个应用程序日志、事件的传输、处理、管理和搜索的平台。你可以用它来统一对应用程序日志进行收集管理,提供 Web 接口用于查询和统计。 Logstash 现在是 ElasticSearch 家族成员之一。 相关链接 Logstash 的详细介绍:请点这里 Logstash 的下载地 ...
分类:
其他好文 时间:
2016-09-14 07:13:55
阅读次数:
103
初探ELK-logstash使用小结2016/9/12【写在前言】说起处理日志的手段,大家或多或少都听说过ELK(elasticsearch+logstash+kibana),怎么入门呢?咱们从一个小小的目标开始。目标:收集nginx日志,集中展示。不少人对ELK的第一印象,容易觉得它这个工具组合似乎挺难上手的,错!..
分类:
其他好文 时间:
2016-09-12 22:29:13
阅读次数:
289
一、ELKStack简介Elstaicsearch:存储和搜索
logstash:收集
kibana:展示.专门为ES设计的展示平台二、ELK之kibana安装环境准备IP 主机名 操作系统
192.168.56.11 linux-node1 centos7
192.168.56.12 linux-node2 centos71、安装JDK[root@linux-node1~]#yuminstall-yjav..
分类:
其他好文 时间:
2016-09-12 22:28:30
阅读次数:
175