转自：http://blog.csdn.net/lively1982/article/details/50678657 ELK是Elasticsearch、Logstash、Kibana的简称，这三者是核心套件，但并非全部。后文的四种基本架构中将逐一介绍应用到的其它套件。 Elasticsearch
分类：
其他好文 时间：
2016-02-22 17:04:02
阅读次数：
197
rsyslog是一个用来管理系统日志的开源程序，是早前syslog的升级版，对原有的日志系统进行了功能的扩展。rsyslog守护进程可以被配置成两种环境，一种是配置成日志收集服务器，rsyslog进程可以从网络中收集其它主机上的日志数据，这些主机会将日志配置为发送到另外的远程服务器。..
分类：
数据库 时间：
2016-02-22 06:47:22
阅读次数：
320
最近我在日志收集的功能中加入了对docker容器日志的支持。这篇文章简单谈谈策略选择和处理方式。...
分类：
Web程序 时间：
2016-02-07 13:40:58
阅读次数：
320
Cluster日志收集：登录到任意一个群集的节点，在命令提示符下执行：clusterlog/g，之后会在节点主机生成cluster.log，路径为：C:\Windows\cluster\reports\cluster.log执行命令后，会在群集的所有节点上自动收集日志。
前言:理论上应该是一周一篇的说，但上一周回湖南浪去了，so~~~~,再者这并不是公司项目，全是自己临时起意，所以业余时间写写~~~更新也许不会太快。下面是个人的一些思路以及大概每篇文章的内容，也许并不规范，为了不让这篇文章看起来太干，所以第三部分放一些所谓的干货，通过..
分类：
移动开发 时间：
2016-01-31 17:26:08
阅读次数：
483
公司使用的快网的CDN，但是快网本身并不提供日志的分析统计，我这里还没有用elk，无奈只能先使用shell对日志进行分析统计，作为运维组对业务情况的一个大致的了解。脚本是对前一天的CDNLOG进行解压缩分析，最后将结果按类输出到指定目录，再将这些结果打包扔回CDNLOG目录，因为..
分类：
其他好文 时间：
2016-01-25 17:26:35
阅读次数：
200
ELK系统主要由三部分组成，分别是elasticsearch、logstash、kibana。ELK系统收到推送过来的日志后，首先由logstash解析日志中的字段，分解成一个一个的关键字。elasticsearch将关键字与日志信息关联起来，以一种特定的格式化方式存储数据到硬盘。kibana提供与用户的交互界面，根据用户需求，从elasticsearch中读取信息并在网页上显示。本文以Redhat...
分类：
其他好文 时间：
2016-01-24 13:03:48
阅读次数：
194
ELK 安装配置简单，用于管理 OpenStack 日志时需注意两点：Logstash 配置文件的编写Elasticsearch 日志存储空间的容量规划另外推荐ELKstack 中文指南。ELK 简介ELK 是一套优秀的日志搜集、存储和查询的开源软件，广泛用于日志系统。当 OpenStack 集群达...
分类：
其他好文 时间：
2016-01-22 13:22:14
阅读次数：
307
美团的日志收集系统负责美团的所有业务日志的收集，并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流。美团的日志收集系统基于Flume设计和搭建而成。《基于Flume的美团日志收集系统》将分两部分给读者呈现美团日志收集系统的架构设计和实战经验。第一部分架构和设计，将主要着眼于日志收集系...
分类：
Web程序 时间：
2016-01-11 17:50:24
阅读次数：
248
ELK日志分析平台学习记录首先ELK主要指elasticsearch、logstash和kibana，三个开源软件组合而成的一套日志平台解决方案。可以将平时收集到的日志，通过前台展示出来，并且可以加以分析，理论上可以解放劳动力（再也不用干上生产取日志这种活了——很搓）。最近在研究ELKstack日..
分类：
其他好文 时间：
2016-01-07 01:32:20
阅读次数：
4249
