上海资邦集团战略发展部目录版本控制信息...1目录i1ELK简介...11.1ElasticSearch介绍...11.2LogStash介绍...11.3Kibana介绍...12开始部署ELK..12.1测试环境准备...12.2安装前的准备工作...12.2.1系统yum源设置...12.2.2系统时间设置...12.2.3内核参数设置...22.2.4最大打开文件..
分类：
其他好文 时间：
2016-06-09 01:01:51
阅读次数：
637
前言ELKstack抓取分析应用日志的前提是开发要将日志的输出格式改成json格式，否则产出的日志很难进行分析。主要流程：tomcat通过log4j输出日志-->logstash接收数据并发送到redis-->logstash从redis获取数据并写入estomcat怎样输出应用日志？tomcat7.0配置log4j日志详细文..
分类：
编程语言 时间：
2016-06-08 17:18:26
阅读次数：
198
logstash如何从redis拉出日志并写入es？
input{
redis{
batch_count=>1
host=>"sz-a-xxxxxredis01-redis-xen.xxxxx.com"
type=>"syslog"
data_type=>"list"
key=>"logstash:syslog-log"
}
redis{
batch_count=>1
host=>"sz-a-xxxxxredis01-redis-xen.xxxx..
分类：
编程语言 时间：
2016-06-08 17:16:53
阅读次数：
284
来看看如何解决乱码问题： 在mysql中默认字符集是latin1， 想要设置字符集为uft-8，可以在 my.cnf 文件中添加以下设置： ［client］ default-character-set=utf8 ［mysqld］ default-character-set=utf8 skip-cha ...
分类：
数据库 时间：
2016-06-08 17:08:30
阅读次数：
313
前言
logstash使用的是最新的2.3版本，此模板仅为参考，一切以官方文档为准
https://www.elastic.co/guide/en/logstash
input模块
接收log4j类型日志
input{
log4j{
type=>"log4j-json"
port=>12201
}
}
filter模块
深入json化message内容
filter{
json{
source=>"mes..
分类：
其他好文 时间：
2016-06-01 21:32:50
阅读次数：
216
准备工作： 在vs工具栏中找到NuGet 下载DotNetZip 现在就可以使用DotNetZip强大的类库了,在这里我给出一些简单的使用。 其中“System.Text.Encoding.Default”是解决中文乱码问题。 从字面上就可以理解zip.AddFile就是从指定路径把文件加入到zip ...
分类：
Web程序 时间：
2016-06-01 10:20:14
阅读次数：
229
Logstash 安装及部署 一、环境配置 操作系统：Cent OS 7 Logstash版本：2.1.1.tar.gz JDK版本：1.7.0_51 SSH Secure Shell版本：XShell 5 操作系统：Cent OS 7 Logstash版本：2.1.1.tar.gz JDK版本：1 ...
分类：
其他好文 时间：
2016-05-31 17:26:10
阅读次数：
876
logstash报错现象Troubleparsingjson{:source=>"message",:raw=>"{\"@timestamp\":\"2016-05-30T14:51:27+08:00\",\"host\":\"10.139.48.166\",\"clientip\":\"180.109.110.203\",\"request_method\":\"GET\",\"size\":4286,\"responsetime\":0.000,\"upstreamtime\":\"-..
分类：
Web程序 时间：
2016-05-30 20:05:07
阅读次数：
6714
logstash:https://download.elastic.co/logstash/logstash/logstash-2.2.2.tar.gz elasticsearch:https://download.elasticsearch.org/elasticsearch/release/or ...
分类：
其他好文 时间：
2016-05-27 18:25:13
阅读次数：
191
前言：Elk主要就是3个软件的组合，主要是elasticsearch搜索引擎，Logstash是一个日志收集日志，kibana实时分析进行展示。[关于日志搜集的软件，如:scribe,flume,heka,logstash,chukwa,fluentd,当然rsyslogrsyslog-ng都可以搜集。关于日志手机后存储软件，如:HDFS,Cassandramong..
分类：
系统相关 时间：
2016-05-27 14:58:51
阅读次数：
856
