******************理论部分*****************前言：在数据为王的时代，日志管理是一个绕不开的话题，相应的开源软件有不少，比如热门的三件套：Logstash、ElasticSearch、Kibana，虽然功能强大，但是配置复杂。相比较而言，rsyslog更容易快速上手。Rsyslog:rsyslog是一款自由..
分类：
数据库 时间：
2016-12-02 03:48:38
阅读次数：
334
首先在形成中文乱码的原因是由于字符集不统一导致的，不同的字符集在转换的过程中必然要出现乱码，当然不排除可以转换。所以要解决中文乱码问题，思路是将输入、存储、显示等流程中涉及到字符集都统一为一种，对于oracle首先必须满足的先决条件是要服务端和客户段的字符集统一..
分类：
数据库 时间：
2016-12-01 23:16:49
阅读次数：
3663
一、概述Elasticsearch是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制，restful风格接口，多数据源，自动搜索负载等。Logstash是一个开源的用于收集,分析和存储日志的工具。Kibana也是一个开源和免费的工具，Kibana可以为Logstash..
分类：
其他好文 时间：
2016-12-01 22:51:11
阅读次数：
450
查看配置文件是否有问题: 在output->elasticsearch下增加一个index配置: 再次简测配置文件: 启动并在后台执行: ...
分类：
其他好文 时间：
2016-12-01 14:13:20
阅读次数：
503
从geoip字段取location的longitude字段 [geoip][location][0] 支持变量内插 "the longitude is %{[geoip][location][0]}" grok表达式： 普通正则：\s+ (?<request_time>\d+(?\.\d+)?)\s ...
分类：
其他好文 时间：
2016-12-01 13:46:21
阅读次数：
130
ElasticSearch存储和搜索LogStash对日志收集Kibana展示
分类：
其他好文 时间：
2016-11-30 23:20:34
阅读次数：
195
LogStash 本身并不维护队列。这里，需要熟练使用本节说的测试方法，针对自己的每一段配置，都确定其性能。LogStash 给自己的线程都设置了单独的线程名称，你可以在 top -H 结果中查看具体线程的负载情况。 摘至：http://udn.yyuap.com/doc/logstash-best ...
分类：
其他好文 时间：
2016-11-30 17:25:02
阅读次数：
138
本文介绍了如何使用成熟的经典架构ELK（即Elastic search，Logstash和Kibana）构建分布式日志监控系统，很多公司采用该架构构建分布式日志系统，包括新浪微博，freewheel，畅捷通等。 背景日志，对每个系统来说，都是很重要，又很容易被忽视的部分。日志里记录了程序执行的关键信 ...
分类：
其他好文 时间：
2016-11-30 14:35:05
阅读次数：
247
elk日志分析与挖掘深入分析 1 为什么要做日志采集？ 2 挖财自己的日志采集和分析体系应该怎么建？ 2.1 日志的采集 2.2 日志的汇总与过滤 2.3 日志的存储 2.4 日志的分析与查询 3 需要解决哪些技术问题？ 3.1 logstash与kafka的对接 3.2 kafka到elastic ...
分类：
其他好文 时间：
2016-11-30 14:26:09
阅读次数：
397
大纲： 一、简介 二、Logstash 三、Redis 四、Elasticsearch 五、Kinaba 一、简介 1、核心组成 ELK由Elasticsearch、Logstash和Kibana三部分组件组成； Elasticsearch是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现 ...
分类：
其他好文 时间：
2016-11-30 13:39:06
阅读次数：
4268
