码迷,mamicode.com
首页 >  
搜索关键字:日志收集 rsyslog 日志分离 消息队列    ( 4732个结果
Storm Trident API 实践
一、概要      1.1 Storm(简介)      Storm是一个实时的可靠地分布式流计算框架。      具体就不多说了,举个例子,它的一个典型的大数据实时计算应用场景:从Kafka消息队列读取消息(可以是logs,clicks,sensor data)、通过Storm对消息进行计算聚合等预处理、把处理结果持久化到NoSQL数据库或者HDFS做进一步深入分析。 1.2 Tride...
分类:Windows程序   时间:2014-11-14 15:42:08    阅读次数:2971
Storm Trident 详细介绍
一、概要      1.1 Storm(简介)      Storm是一个实时的可靠地分布式流计算框架。      具体就不多说了,举个例子,它的一个典型的大数据实时计算应用场景:从Kafka消息队列读取消息(可以是logs,clicks,sensor data)、通过Storm对消息进行计算聚合等预处理、把处理结果持久化到NoSQL数据库或者HDFS做进一步深入分析。...
分类:其他好文   时间:2014-11-14 14:15:48    阅读次数:291
AMQP之RabbitMq
AMQP协议是一个高级抽象层消息通信协议,RabbitMQ是AMQP协议的实现。它主要包括以下组件: 1. Server(broker): 接受客户端连接,实现AMQP消息队列和路由功能的进程。 2. Virtual Host:其实是一个虚拟概念,类似于权限控制组,一个Virtual Host里面可以有若干个Exchange和Queue,但是权限控制的最小粒...
分类:其他好文   时间:2014-11-13 22:30:06    阅读次数:451
第四讲:消息队列处理类
#ifndef __CommonMsgHandler___#define __CommonMsgHandler___#include "cocos2d.h"#include #include #include #include #include #include "receive_data/Base...
分类:其他好文   时间:2014-11-13 18:27:07    阅读次数:201
linux 消息队列实例
前言: 消息队列就是一个消息的链表。可以把消息看作一个记录,具有特定的格式以及特定的优先级。对消息队列有写权限的进程可以向其中按照一定的规则添加新消息;对消息队列有读权限的进程则可以从消息队列中读走消息函数:1.创建新消息队列或取得已存在消息队列原型:int msgget(key_t key, in...
分类:系统相关   时间:2014-11-13 18:18:26    阅读次数:202
谈谈ODPS商业化(六):ODPS小伙伴SLS和DPC
在典型的大数据解决方案里,除了以ODPS这样的离线分布式计算引擎为核心,周边还需要日志收集、开发IDE、工作流调度、数据质量监控、BI报表等等一系列配套机制。因此ODPS用户往往还会对SLS和DPC等服务感兴趣。 先说SLS(简单日志服务),这是阿里云提供的针对日志收集、存储、查询和分析的云服务。用...
分类:其他好文   时间:2014-11-12 21:08:16    阅读次数:402
rabbitmq 消息队列工作模式
ceilemter-zmq----->rabbitmq队列去塞数据,这些数据是有boss平台的bill来取,从而的到计费系统的支持。具体操作rabbitmq,消息队列rabbitmq单机不需要配置,安装OK就可以启动服务。查看消息队列:#rabbitmqctllist_queuesListingqueues...notifications.billing0//...done...
分类:其他好文   时间:2014-11-12 18:03:28    阅读次数:251
【转】持久化消息队列之MEMCACHEQ
G MEMCACHEQ AS MESSAGE QUEUEPHP,消息队列,MEMCACHEQ使用消息队列(MESSAGE QUEUE)可以把某些耗时的工作推后,然后在后台慢慢地去执行,这样就不会让你的用户等待太久。今天介绍PHP的消息队列: MEMCACHEQ。MEMCACHEQMEMCACHEQ的...
分类:系统相关   时间:2014-11-11 00:40:10    阅读次数:324
Java进程间通信
传统的进程间通信的方式有大致如下几种:(1) 管道(PIPE)(2) 命名管道(FIFO)(3) 信号量(Semphore)(4) 消息队列(MessageQueue)(5) 共享内存(SharedMemory)(6) SocketJava如何支持进程间通信。我们把Java进程理解为JVM进程。很明...
分类:编程语言   时间:2014-11-10 19:30:30    阅读次数:219
TCP/IP, WebSocket 和 MQTT
按照OSI网络分层模型,IP是网络层协议,TCP是传输层协议,而HTTP和MQTT是应用层的协议。在这三者之间, TCP是HTTP和MQTT底层的协议。大家对HTTP很熟悉,这里简要介绍下MQTT。MQTT(Message Queuing Telemetry Transport,消息队列遥测传输)是...
分类:Web程序   时间:2014-11-09 20:48:19    阅读次数:457
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!