目录 1、使用codec的multiline插件收集java日志... 1 2、收集nginx日志... 2 3、收集系统syslog日志... 3 4、使用fliter的grok模块收集mysql日志... 4 1、使用codec的multiline插件收集java日志 对于采用ELK作为应用日志 ...
分类:
编程语言 时间:
2019-07-26 01:33:00
阅读次数:
150
Logstash和Kibana安装: Logstash-6.2.2安装 1)解压完毕后需要配置profile的环境变量 末尾追加: export LOGSTASH_HOME=/opt/logstash export PATH=$PATH:$LOGSTASH_HOME/bin Kibana-6.2.2 ...
分类:
其他好文 时间:
2019-07-25 00:32:28
阅读次数:
120
一、ELK Stack介绍 大型项目,多产品线的日志收集 ,分析平台 为什么用ELK? 1.开发人员排查问题,服务器上查看权限 2.项目多,服务器多,日志类型多 数据源 logstash elasticsearch kibana elasticsearch:分布式数据库 logstash:服务器端数 ...
分类:
其他好文 时间:
2019-07-24 19:32:41
阅读次数:
135
+++++++++++++++++++++++++++++++++++++++++ 1. 工作中最长使用的就是微信,普及,开源,而且免费!!! 2. 要记录的值: · 部门id · 企业id ...
分类:
微信 时间:
2019-07-24 16:20:15
阅读次数:
151
elasticsearch(官网)的发展历程省略。。总所周知,它是目前主流的,最受欢迎的搜索引擎之一,可用于数据搜集分析,文档检索等等方面。而logstash是Elastic 公司旗下的一款日志搜索收集产品。一步一个脚印,楼主正在摸索着es+logstash+kibana的关系及运用(后续会引入do ...
分类:
其他好文 时间:
2019-07-24 12:58:03
阅读次数:
101
原文:Docker ElK安装部署使用教程 一、简介 1、核心组成 ELK由Elasticsearch、Logstash和Kibana三部分组件组成; Elasticsearch是个开源分布式搜索引擎,它的特点有:分布式,零配置,自动发现,索引自动分片,索引副本机制,restful风格接口,多数据源 ...
分类:
其他好文 时间:
2019-07-24 09:19:53
阅读次数:
113
自从hadoo集群新加了9个节点之后,有时候发现yarnweb页面有1个或者几个unhealthy状态的节点,但是过一会又正常了,但这种状态经常引起后台的监控的报警。查看了异常节点的日志显示如下yarn的本地日志目录使用超过了90%,然后df看了下,根目录使用率100%了才30G的大小怪不得对比新老节点的磁盘大小发现老节点的大小在20T....修改了新加节点yarn配置文件重新定义了中间态目录,重
分类:
其他好文 时间:
2019-07-23 22:36:30
阅读次数:
132
1.进入官网 https://www.elastic.co/cn/downloads/logstash 下载相应版本的logstash 2. ./bin/logstash -f logstash.conf启动logstash Small: 100,000 ratings and 3,600 tag ...
分类:
其他好文 时间:
2019-07-21 18:36:17
阅读次数:
110
一、配置及部署 首先从官网 https://www.elastic.co/downloads下载logstash 并解压 tar -zxvf logstash-5.6.0.tar.gz 配置一个test.conf 测试logstash: # 在logstash解压目录下,新建test.conf # ...
分类:
其他好文 时间:
2019-07-18 15:11:42
阅读次数:
97
控制节点执行如下的脚本:#!/bin/bashMYSQL_ROOT_PASSWD='m4r!adbOP'GNOCCHI_PASSWD='gnocchi1234!'CEILOMETER_PASSWD='ceilometer1234!'RABBIT_PASSWD='0penstackRMQ'AODH_P... ...
分类:
其他好文 时间:
2019-07-18 13:45:01
阅读次数:
104