一.环境准备角色SERVERIPlogstashagent10.1.11.31logstashagent10.1.11.35logstashagent10.1.11.36logstashcentral10.1.11.13elasticsearch10.1.11.13redis10.1.11.13kibana10.1.11.13架构图如下:整个流程如下:1)远程节点的logstashagent收集本地日志后发送到远程redis的list队..
分类:
其他好文 时间:
2015-11-23 19:18:39
阅读次数:
326
ELK“Elasticsearch、Logstash、Kibana”今天只是了解。搭建服务的文章后期待续。日志的收集和分析一直都是困扰你我的麻烦事情,虽然我们知道的是Splunk公司正是凭借着自己在这个大数据细分领域的一枝独秀,成为百亿美元级的明星公司。但是Splunk每GB高达4500美元的报价,又让..
分类:
其他好文 时间:
2015-11-20 20:12:15
阅读次数:
221
以logstash-1.1.0-monolithic.jar为例进行安装使用yum源安装好jdk包[root@localhost~]#yum--nogpgcheckinstalljdk配置系统环境变量[root@localhost~]#cd/etc[root@localhost~]#geditprofile在profile文件中添加如下代码exportJAVA_HOME=/usr/lib/jvm/jre-1.7.0-openjdk-1.7.0.5..
分类:
编程语言 时间:
2015-11-20 00:23:34
阅读次数:
223
\\ 0>?curl?-XGET?http://10.19.0.64:9200/logstash-php-2015.11.10/weibo_img_uniupload_app/_mapping?pretty
{
??"logstash-php-2015.11.10"?:?{
????"mappings"?:?{
??????"weibo_img_uniu...
分类:
移动开发 时间:
2015-11-16 19:50:54
阅读次数:
190
日志的分析和监控在系统开发中占非常重要的地位,系统越复杂,日志的分析和监控就越重要,常见的需求有: 根据关键字查询日志详情 监控系统的运行状况 统计分析,比如接口的调用次数、执行时间、成功率等 异常数据...
分类:
其他好文 时间:
2015-11-13 11:53:29
阅读次数:
571
以下文章复制自http://blog.sina.com.cn/s/blog_7a3510120100xt5b.html1.要解决中文乱码问题,首先得了解什么是字符编码计算机要处理各种字符,就需要将字符和二进制内码对应起来,这种对应关系就是字符编码。要制定字符编码首先要确定字符集,并将字符集内的字符排...
分类:
其他好文 时间:
2015-11-11 09:58:29
阅读次数:
279
ELK即Elasticsearch+Logstash+Kibana组合,是一个开源分布式搜索平台,搭建该平台的目的就是为了方便的查询日志。Elasticsearch一个开源的搜索引擎框架,Logstash集成各种收集日志插件,还是一个比较优秀的正则切割日志工具;Kibana一个免费的web图形工具。安装架构如图所示,..
分类:
其他好文 时间:
2015-11-09 14:03:18
阅读次数:
412
本次安装的相关环境:Centos_x64_6.6redis2.8.23Elasticsearch2.0.0,Logstash2.0.0,Kibana4.2.0软件下载地址:redis:http://redis.io/download
Elasticsearch:wgethttps://download.elasticsearch.org/elasticsearch/release/org/elasticsearch/distribution/rpm/elasticsearc..
分类:
其他好文 时间:
2015-11-07 06:43:39
阅读次数:
1103
(一)logstash是什么?? logstash是一种分布式日志收集框架,开发语言是JRuby,当然是为了与Java平台对接,不过与Ruby语法兼容良好,非常简洁强大,经常与ElasticSearch,Kibana配置,组成著名的ELK技术栈,非常...
分类:
其他好文 时间:
2015-11-05 12:13:45
阅读次数:
223
logstash,elasticsearch,kibana 怎么进行nginx的日志分析呢?首先,架构方面,nginx是有日志文件的,它的每个请求的状态等都有日志文件进行记录。其次,需要有个队列,redis的list结构正好可以作为队列使用。然后...
分类:
其他好文 时间:
2015-11-05 10:51:47
阅读次数:
291