分布式日志收集系统日志收集系统采用elasticsearch+fluentd+kibana，用fluentd代替elk社区里的logstash，logstas的插件是最多的，同时logstash的性能和资源消耗太高，经某站大佬压力测试，在环境为2核4g的云计算服务器上，logstash写入qps极限为8000，通过结合易瑞现有询报价系统，同时也是用户3000+的项目产品，logstash负载压力显
分类：
其他好文 时间：
2018-03-16 14:00:25
阅读次数：
340
架构 上图为http://www.cnblogs.com/delgyd/p/elk.html#3656833 中的图架构解读 : （整个架构从左到右，总共分为5层）（本文将第三层以下的进行了合并，无elasticsearch集群） 第一层、数据采集层最左边的是业务服务器集群，上面安装了filebeat做日志采集，同时把采集的日志分别发
分类：
其他好文 时间：
2018-03-14 22:07:04
阅读次数：
216
一、基础软件安装 yum -y localinstall elasticsearch-2.1.1.rpm chkconfig --add elasticsearch rpm -ivh jdk-8u111-linux-x64.rpm (elasticsearch 依赖于jdk1.8以上） [root@ ...
分类：
其他好文 时间：
2018-03-12 21:15:37
阅读次数：
253
前言 笔者多年前便维护过ELK，但是由于站点日志流量及服务器数量并不是很多基本都是单机搞定。 然而光Web服务器就400+，Nginx日志大小每天50G+，加上其他业务系统日志，之前单机ELK显然不足以支撑现有的业务场景。 规划篇 目前的业务采用阿里云+自建机房的模式，阿里云做为线上业务，自建机房做 ...
分类：
其他好文 时间：
2018-03-10 19:29:52
阅读次数：
226
关于elk集群搭建请查看：http://blog.51cto.com/linyingyong/2084284先上一个我最后弄出来的图形：环境 ：?????nginx服务器? 安装filebeat配置：????1.nginx配置??????&
分类：
其他好文 时间：
2018-03-10 15:59:05
阅读次数：
338
本文介绍在k8s集群中使用node-exporter、prometheus、grafana对集群进行监控。其实现原理有点类似ELK、EFK组合。node-exporter组件负责收集节点上的metrics监控数据，并将数据推送给prometheus,prometheus负责存储这些数据，grafana将这些数据通过网页以图形的形式展现给用户。在开始之前有必要了解下Prometheus是什么?Pro
分类：
Web程序 时间：
2018-03-09 10:41:33
阅读次数：
237
