ELK简介 ELK Stack是软件集合Elasticsearch、Logstash、Kibana的简称,由这三个软件及其相关的组件可以打造大规模日志实时处理系统。 其中,Elasticsearch 是一个基于 Lucene 的、支持全文索引的分布式存储和索引引擎,主要负责将日志索引并存储起来,方便 ...
分类:
其他好文 时间:
2017-12-23 16:00:32
阅读次数:
203
这里使用elasticsearch做全文检索,不是ELK日志采集。 elasticsearch作为全文检索,必须服务端和客服端的版本一致,所以在安装elasticsearch时,要注意版本问题。 前言 一、JAVA环境配置 ElasticSearch是基于lucence开发的,也就是运行需要java ...
分类:
系统相关 时间:
2017-12-22 22:53:07
阅读次数:
429
elasticsearch的maven依赖 org.elasticsearch elasticsearch 2.1.1 test package com.cheguo.merchant.app.toolkit; import org.elasticsearch.action.admin.i... ...
分类:
编程语言 时间:
2017-12-20 16:58:54
阅读次数:
258
2017/12/17_第1次修改 ccb_warlock ELK(elasticsearch、logstash、kibana)可以作为日志收集及分析的一整套系统,通过阿里的普及也有越来越多的公司在使用,使用下来功能还可以,这里整理记录一个部署手册。 为了方便,将ELK都部署在一台os里。 一、环境准 ...
分类:
其他好文 时间:
2017-12-18 01:30:45
阅读次数:
393
简单说下需求: 统计各个省份的 3大运营商的接口访问成功率,绘图展示 数据格式 最终入库(influxdb)的日志 示例数据:(influxdb的sql) 说下方案 "第一种方案之前已经实现过了elk.效果并不了解,里面有提到" 第二种方案: influxdb+grafana, 好处是可灵活计算比例 ...
分类:
数据库 时间:
2017-12-16 17:11:49
阅读次数:
331
一、介绍 总共4台机器,分别为 192.168.1.99 192.168.1.100 192.168.1.210 192.168.1.211 服务所在机器为: redis:192.168.1.211 logstash: 192.168.210 192.168.1.211 elasticsearch: ...
分类:
其他好文 时间:
2017-12-16 17:10:45
阅读次数:
386
ELK是三款软件的总称,包括了elasticsearch、logstash、kibana,其实在生产使用中,我们还需要使用到其他的更多辅助软件来更好更合理的收集展示数据。 Elasticsearch:一个分布式的搜索查询服务器,提供了rest接口 Logstash:收集处理并传出日志,他安装在需要被 ...
分类:
其他好文 时间:
2017-12-15 19:36:23
阅读次数:
292
2017/12/15_第1次修改 ccb_warlock 查找ELK资料的时候发现双十二ELK有6.1.0版本了,想想目前使用的还是5.6.3,大版本的跃迁肯定有值得升级的变化,于是做好备份升级一波。 备份还是体现了价值,更新后发现kibana挂了,报“Your Kibana index is ou ...
分类:
其他好文 时间:
2017-12-15 16:22:43
阅读次数:
508
为什么用到ELK: 一般我们需要进行日志分析场景:直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大的场景中,此方法效率低下,需要集中化的日志管理,所有服务器上的日志收集汇总。常见解决思路是建立集中式日志收集系统,将所有节点上的日志统一收集,管理,访问。 一般大型系统是一个分 ...
分类:
其他好文 时间:
2017-12-14 04:04:46
阅读次数:
236
转载自:http://blog.csdn.net/loophome/article/details/52317209 一、安装Logstash 1)在安装Logstash之前,确保已经安装了Java的运行环境 2)在官网(https://www.elastic.co/)下载Logstash 2016 ...
分类:
其他好文 时间:
2017-12-13 20:22:39
阅读次数:
188