https://mp.weixin.qq.com/s?__biz=MjM5MDkwNjA2Nw==&mid=2650373776&idx=1&sn=e823e0d8d64e6e31d22e89b3d23cb759&scene=1&srcid=0720BzuzPl916oZWVGfiwduR&key= ...
分类：
其他好文 时间：
2016-07-20 22:53:31
阅读次数：
336
一般系统或服务生成的日志都是一大长串。每个字段之间用空格隔开。logstash在获取日志是整个一串获取，如果能日志中每个字段代表的意思分割开来在传给elasticsearch。这样呈现出来的效果将会更加好，而且也能让kibana更方便的绘制图形。Grok是Logstash最重要的插件。它的主要作..
分类：
其他好文 时间：
2016-07-20 19:52:42
阅读次数：
931
1.下载解压2.打开config/kibana.yml配置文件，修改elasticsearch的url，3.启动kibana4.在浏览器中输入http://10.0.0.5:5601/，进入Kibana配置页面。如果elasticsearch的地址配置不正确的话，会在控制台有提示，而且浏览器页面也会显示没有连接到elasticsearch。
分类：
其他好文 时间：
2016-07-20 19:51:10
阅读次数：
327
（一）Beats是什么？Beats是elasticsearch公司开源的一款采集系统监控数据的代理agent，它可以发送不同类型的数据到elasticsearch中，也可以行将采集完的数据发送到logstash中转，然后在推送到elasticsearch中，目前还在发展中，与成熟的监控系统zabbix和ganglia相比就界面看起..
分类：
其他好文 时间：
2016-07-20 13:39:52
阅读次数：
441
首先安装jdk，我这里使用open-jdk yum list all | grep jdk yum -y install java-1.8.0-openjdk-devel, java-1.8.0-openjdk.x86_64和java-1.8.0-openjdk-headless.x86_64作为依 ...
分类：
其他好文 时间：
2016-07-19 20:53:20
阅读次数：
256
1.配置log4j.propertieslog4j.rootLogger=INFO,DEBUG,logstash
log4j.appender.logstash=org.apache.log4j.net.SocketAppender
log4j.appender.logstash.Port=4560
log4j.appender.logstash.RemoteHost=10.0.0.5
log4j.appender.logstash.ReconnetionDelay=60000
log4j.appende..
分类：
其他好文 时间：
2016-07-19 19:07:06
阅读次数：
2652
输入插件是Logstash从特定的数据源读取数据，Logstash可用插件包括，详情可见这里，下面说一些常见的输入插件：stdin插件：标准的输入插件，能够从命令行中读取事件。可选配置：add_fieldhash(哈希)｛｝codeccodec“line”tagsarray(数组)typestring（字符串）file插件：Logsta..
分类：
其他好文 时间：
2016-07-19 11:35:55
阅读次数：
401
配置文件的基本格式，输入部分，过滤器部分和输出部分。#Thisisacomment.Youshouldusecommentstodescribe
#partsofyourconfiguration.
input{
...
}
filter{
...
}
output{
...
}每个部分都可以配置一个或多个插件。下面展示的是输入部分，有两个file插件。input{
file{
path=&..
分类：
其他好文 时间：
2016-07-15 17:24:57
阅读次数：
954
flume 1 .背景 flume是由cloudera软件公司产出的可分布式日志收集系统，后与2009年被捐赠了apache软件基金会，为hadoop相关组件之一。尤其近几年随着flume的不断被完善以及升级版本的逐一推出，特别是flume-ng;同时flume内部的各种组件不断丰富，用户在开发的过 ...
分类：
Web程序 时间：
2016-07-13 01:00:08
阅读次数：
228
上次实现了flume＋kafka＋hbase＋ELK：http://www.cnblogs.com/super-d2/p/5486739.html 这次我们可以加上storm: storm-0.9.5简单配置如下： 安装依赖 安装 Python 安装 zookeeper wget http://mi ...
分类：
数据库 时间：
2016-07-12 13:38:43
阅读次数：
427
