码迷,mamicode.com
首页 >  
搜索关键字:日志收集 rsyslog 日志分离 消息队列    ( 4732个结果
进程组间通讯(消息队列)
1.所有进程共用一个消息队列组。2.消息队列组里面包含一个发送消息队列和一个接收消息队列。3.请求进程主动向发送消息队列发送消息,从接收消息队列接收消息。处理进程从发送消息队列读取请求,向接收队列发送处理结果。4.同一进程组都是相同的进程。5.处理进程组内的所有进程以竞争的方式从消息队列内读取请求。...
分类:其他好文   时间:2014-07-23 12:53:26    阅读次数:184
Kafka实战系列--Kafka API使用体验
前言: kafka是linkedin开源的消息队列, 淘宝的metaq就是基于kafka而研发. 而消息队列作为一个分布式组件, 在服务解耦/异步化, 扮演非常重要的角色. 本系列主要研究kafka的思想和使用, 本文主要讲解kafka的一些基本概念和api的使用. *) 准备工作1) 配置ma.....
分类:Windows程序   时间:2014-07-22 22:35:13    阅读次数:415
swoole
swoole,PHP语言的高性能网络通信框架,提供了PHP语言的异步多线程服务器,异步TCP/UDP网络客户端,异步MySQL,数据库连接池,AsyncTask,消息队列,毫秒定时器,异步文件读写,异步DNS查询。 http://www.swoole....
分类:其他好文   时间:2014-07-21 10:31:41    阅读次数:199
网站数据统计分析中的日志收集原理及其实现
网站数据统计分析工具是网站站长和运营人员经常使用的一种工具,比较常用的有谷歌分析、百度统计?和?腾讯分析等等。所有这些统计分析工具的第一步都是网站访问数据的收集。目前主流的数据收集方式基本都是基于j...
分类:Web程序   时间:2014-07-21 10:06:59    阅读次数:521
日志分析 logstash elashsearch kibana
日志分析界面:logstash(分析端)+elashsearch(存储端)+kibana(展示端)工具:进行数据整理statsd1、diamond-->statsd-->graphite2、实时收集数据的做法:logstash-->statsd-->graphite日志收集可视化(LEK):logstash+elasticsearch+kibanalegend:logstash--》..
分类:其他好文   时间:2014-07-20 23:38:43    阅读次数:696
Linux 进程通信之 ——信号和信号量总结
如今最经常使用的进程间通信的方式有:信号,信号量,消息队列,共享内存。 所谓进程通信,就是不同进程之间进行一些"接触",这种接触有简单,也有复杂。机制不同,复杂度也不一样。通信是一个广义上的意义,不仅仅指传递一些massege。他们的用法是基本相同的,所以仅仅要掌握了一种的用法,然后记住其他的用.....
分类:系统相关   时间:2014-07-18 18:31:13    阅读次数:305
进程/线程介绍
一、进程进程可以认为是程序执行时的一个实例.进程是系统进行资源分配的独立的实体,且每个进程拥有独立的地址空间.一个进程无法直接访问另一个进程的变量和数据结构,如果希望让一个进程访问另一个进程的资源,需要使用进程间通信,比如:管道,有名管道,信号,信号量,消息队列,套接字等.一个进程可以拥有多个线程,...
分类:编程语言   时间:2014-07-15 23:39:05    阅读次数:334
flume的基本概念,数据流模型
1.flume的基本概念 本文中所有与flume相关术语都采用斜体英文表示,这些术语的含义如下所示。 flume             一个可靠的,分布式的,用于采集,聚合,传输海量日志数据的系统。 Web Server   一个产生 Events 的系统。 Agent            flume 系统中的一个节点,它主要包含三个部件:Source, Channel...
分类:其他好文   时间:2014-07-15 12:59:26    阅读次数:402
C++内存泄露的有效预防方法:谁使用,谁删除
内存泄露就是new出来的东西没有delete,我们可以这样:创建动态对象的人尽管使用new来创建对象;使用此对象的人负责释放此内存块。 例如:我和他人共享一个消息队列,他人将消息(new出来的对象)放到消息队列中,他不负责释放;我从消息队列里取消息,我一旦从消息队列里取出一个消息,消息队列里就不再有这个消息,消息的控制权和所有权都在我手上,我在用完之后就应该delete。这样就保证了代码...
分类:编程语言   时间:2014-07-14 11:07:27    阅读次数:217
七月工作笔记 7.7 - 7.11
1. vs第二次单步调试崩溃。。一开始不知道为什么,重装无数次。。后来发现是VAssistX 插件的问题。。。将下载下来的插件包中的VA_X.dll  拷贝到VAssistX 的安装路径下即可。2. 发现了一个很棒的vs配色方案的网站   http://studiostyl.es/3. sendmessage和postmessage的区别PostMessage只负责将消息放到消息队列中,不确定何时...
分类:其他好文   时间:2014-07-13 18:44:16    阅读次数:244
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!