码迷,mamicode.com
首页 >  
搜索关键字:elk 日志收集    ( 1865个结果
[flume] channel 和 sink
上周把安卓日志手机的客户端sdk完成跑通,这周开始调试日志服务器端。使用flume进行日志收集,然后转kafka。在测试的时候总是发现漏掉一些event,后来才知道对 channel 和 sink 的使用有误。当多个sink使用同一个channel时,event是会分流共同消耗的,而不是每个sink...
分类:Web程序   时间:2016-01-05 18:40:42    阅读次数:197
2016最新老男孩高级架构师实战视频集合
老男孩高级架构师新课在线视频http://edu.51cto.com/lecturer/user_id-7671914.html老男孩高级架构师新课课表:http://oldboy.blog.51cto.com/2561410/1334659老男孩12期架构师增加云计算DOCKER(全新更新),ELK分布式日志(全新更新),深度KVM(全新更新)、OPENSTACK云计算(全新更..
分类:其他好文   时间:2015-12-23 02:21:24    阅读次数:177
企业日志分析之日志管理
感谢dl528888(吟)帮忙和相关的技术。自己刚刚弄会了日志管理。图:
分类:其他好文   时间:2015-12-18 19:02:51    阅读次数:146
打造高效的运维日志收集与分析平台
0x01背景面对与日俱增的日志信息,最传统的日志收集方式已难以满足运维人员的基本需求。So,我们何不利用如今丰富的开源工具来打造一款高效实用的运维日志收集分析平台呢。以下就我们目前尝试在做的运维日志平台进行简要介绍,希望能与各位交流心得经验。0x02平台架构我们并没..
分类:其他好文   时间:2015-12-13 23:53:15    阅读次数:260
flume分布式日志收集测试
官方参考文档https://flume.apache.org/FlumeUserGuide.html#file-channelFlumeNG是一个分布式、可靠、可用的系统,它能够将不同数据源的海量日志数据进行高效收集、聚合、移动,最后存储到一个中心化数据存储系统中。由原来的FlumeOG到现在的FlumeNG,进行了架构重构,并且现..
分类:Web程序   时间:2015-12-13 00:50:23    阅读次数:306
Log4J & elk 事故总结
周六的早晨8点,应用出现了大面积的登录超时问题。作为一款日活15W、用户量700W+的应用,这是致命的问题。唯一的安慰是——好在今天是周末,加班的公司才会使用。虽然如此,客服、产品的电话也被打爆了。初步怀疑,问题与前一天晚上的更新有关,运维熟练的回滚了更新,更新的应用全部回滚完毕,可以,问题依然没有...
分类:其他好文   时间:2015-12-12 18:35:26    阅读次数:760
(转)大规模日志收集处理项目的技术总结
转自http://blog.csdn.net/nacey5201/article/details/33401137http://www.dataguru.cn/article-4110-1.html
分类:其他好文   时间:2015-12-08 18:27:54    阅读次数:177
ELK Stack最新版本测试二配置篇
阅读本文前请浏览ELKStack最新版本测试一安装篇http://jerrymin.blog.51cto.com/3002256/1720109详细配置如下:一,客户端1,nginx日志格式log_formatlogstash_json‘{"@timestamp":"$time_iso8601",‘‘"host":"$server_addr",‘‘"clientip":"$remote_addr",‘‘"size":$body_bytes_..
分类:其他好文   时间:2015-12-07 00:45:37    阅读次数:311
ELK Stack最新版本测试一安装篇
版本filebeat1.0.0-rc2logstash2.0.0-1elasticsearch2.0.0kibana4.2名词解释Elasticsearch存储索引KibanaUIKibanadashboard可视化思维图LogstashInputBeatsplugin收集事件Elasticsearchoutputplugin发送事务Filebeat日志数据托运人shipperTopbeat轻量级服务器监控Packetbeat在..
分类:其他好文   时间:2015-12-07 00:45:37    阅读次数:1053
DS4700存储日志收集
a)DS4700存储日志收集 1)收集all support data 1.1、启动客户端”DS Storage manger 10 client”添加控制器IP”192.168.128.101、192.168.128.102“ 1.2、打开菜单Advance-->troubleshooting--...
分类:其他好文   时间:2015-12-03 00:13:53    阅读次数:662
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!