#一:简介```Elasticsearch作为日志的存储和索引平台;Kibana用来从Elasticsearch获取数据,进行数据可视化,定制数据报表;Logstash依靠强大繁多的插件作为日志加工平台;Filebeat用来放到各个主机中收集指定位置的日志,将收集到日志发送到Logstash;Log4j直接与Logstash连接..
分类:
其他好文 时间:
2016-10-14 18:15:58
阅读次数:
1495
1、ELK介绍 1.1 elasticsearch 1.1.1 elasticsearch介绍 ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java开发的,并作为Apache许 ...
分类:
其他好文 时间:
2016-10-12 00:18:17
阅读次数:
1744
# ELK:Elasticsearch + Logstash + Kibana 搭建教程 Shipper:日志收集者。负责监控本地日志文件的变化,及时把日志文件的最新内容收集起来,输出到Redis暂存。Indexer:日志存储者。负责从Redis接收日志,写入到本地文件。Broker:日志Hub,用 ...
分类:
其他好文 时间:
2016-10-11 11:16:49
阅读次数:
318
一、什么是Flume?flume作为cloudera开发的实时日志收集系统,受到了业界的认可与广泛应用。Flume初始的发行版本目前被统称为FlumeOG(originalgeneration),属于cloudera。但随着FLume功能的扩展,FlumeOG代码工程臃肿、核心组件设计不合理、核心配置不标准等缺点暴露出来,尤..
分类:
Web程序 时间:
2016-10-11 00:09:50
阅读次数:
374
yum install redis -y vim /etc/redis [root@linux-node1 etc]# grep '^[a-z]' /etc/redis.conf daemonize yes pidfile /var/run/redis/redis.pid port 6379 bin... ...
分类:
其他好文 时间:
2016-10-10 13:44:04
阅读次数:
139
工作原理如下如所示:部署流程:1、安装logstash的JDK环境:#tarzvxfjdk-8u73-linux-x64.tar.gz
#mvjdk-8u73-linux-x64/usr/local/java
#vim/etc/profile
exportJAVA_HOME=/usr/local/java
CLASSPATH=/usr/local/java/lib/dt.jar/usr/local/java/lib/tools.jar
PATH=/usr/local..
分类:
其他好文 时间:
2016-09-29 22:09:15
阅读次数:
333
这两天用python写了一个自动化测试框架,取名为Auty。准备用来做Web方面的接口测试,以下为Auty框架一步一步的搭建过程—— Auty自动化测试框架第一篇——生成执行列表 Auty自动化测试框架第二篇——读取与执行脚本列表 Auty自动化测试框架第三篇——添加异常处理与日志收集 Auty自动 ...
分类:
编程语言 时间:
2016-09-29 21:16:49
阅读次数:
139
logstash是一个数据分析软件,主要目的是分析log日志。整一套软件可以当作一个MVC模型,logstash是controller层,Elasticsearch是一个model层,kibana是view层。 首先将数据传给logstash,它将数据进行过滤和格式化(转成JSON格式),然后传给E ...
分类:
其他好文 时间:
2016-09-27 15:07:01
阅读次数:
219
elk整体架构图: 一、logstash indexer 配置文件: 注意: 主要是在output插件es部分添加一个index,创建一个索引类型(这也是indexer的名字的来源) input拆件是为了测试才改成标准输入 二、启动es,kibana,logstash indexer 在indexe ...
分类:
其他好文 时间:
2016-09-24 13:33:33
阅读次数:
622
初探ELK-以收集nginx日志为例示范搭建一个ELK环境的基本步骤2016/9/22
一、环境
1、RPM
1)收集rpm包
wgethttps://download.elastic.co/logstash/logstash/packages/centos/logstash-2.4.0.noarch.rpm
wgethttps://download.elastic.co/elasticsearch/release/org/elasticsearc..
分类:
其他好文 时间:
2016-09-23 15:20:17
阅读次数:
244