Flume配置
。
flume生成的数据结构
"_index" : "logstash-2013.01.07",
"_type" : "tms_jboss_syslog",
"_id" : "a_M9X_0YSpmE7A_bEzIFiw",
"_score" : 1.0, "_source" : {"@source":"file://localhost.localdomain/tmp...
分类：
其他好文 时间：
2014-10-09 17:03:48
阅读次数：
290
安装mysql之后，如果存储中文，再读出的时候就会出现乱码问题。现在的字符集有几百种之多，都是一些公司或者组织定义的。我们应该使用能够容纳世界全部语言全部字符的字符集，这样就不会再出现乱码问题。这就是现在通用的UTF-8。要理解编码就应该区分字符集和编码格式是说的同一问题的两个方面。
导致乱码的原因是存储和读取时采用的是不同的字符集。
推荐在建库之前修改编码格式：
一、进入mysql(m...
分类：
数据库 时间：
2014-10-04 12:35:56
阅读次数：
231
1、编写fliter的代码import java.io.IOException;import javax.servlet.Filter;import javax.servlet.FilterChain;import javax.servlet.FilterConfig;import javax.se...
分类：
其他好文 时间：
2014-09-29 21:51:01
阅读次数：
136
Logstash+Elasticsearch+Kibana+S3+NginxbuildourprivatelogquerysystemSystemstructureHowtosetupLogstash-index(Logstashserver)yum-yinstalljava-1.7.0-openjdkInstallandconfigureElasticsearch(Logstash1.4.2recommendsElasticsearch1.1.1)rpm--importhttp://packages.ela..
分类：
其他好文 时间：
2014-09-27 09:56:30
阅读次数：
322
用了这个logstash扩展https://github.com/PeterPaulH/logstash-influxdb/blob/master/src/influxdb.rb把这个文件放到 logstash-1.4.2/lib/logstash/outputs看一下午logstash的文档，终于...
分类：
数据库 时间：
2014-09-25 22:12:27
阅读次数：
355
1.设置struts的字符编码，可以在struts.xml中增加以下代码：
或者找到struts的默认配置文件，位置在 struts2-core-2.3.16.3.jar 里面 org.apache.struts2 包中的 default.properties 文件。修改以下配置：
### This can be used to set your default locale ...
分类：
编程语言 时间：
2014-09-17 18:44:12
阅读次数：
222
logstash-forwarder搜集日志，汇总给logstash，然后输出到elasticsearch,并由kibana展现web界面.
分类：
其他好文 时间：
2014-09-17 18:23:32
阅读次数：
179
前言：做运维的很重要的基础工作就是监控，之前都是统计数据入库，然后前端js图表插件出图，费时费力，可定制性差前几天接触到了ELK(logstash, elasticsearch, kibana)这套日志收集展示工具集,的确很方便，但是手头没有那么大的存储啊也不是所有的日志数据都需要，然后就发现了gr...
分类：
其他好文 时间：
2014-09-16 15:30:20
阅读次数：
404
今天重新调整了下配置文件，之前的apache_errorlog未匹配到clientip。1.首先修改shipper.confinput{
file{
type=>"apache-accesslog"
path=>"/var/log/httpd/access_log"
}
file{
type=>"apache-errorlog"
path=>"/var/log/httpd/error_log"
}
}
filter{
if[type..
分类：
其他好文 时间：
2014-09-12 17:24:04
阅读次数：
786
