一、Kafka介绍 Kafka是Linkin在2010年开源的分布式发布订阅消息系统,Kafka是高吞吐量的消息订阅系统。二、Kafka结构 Kafka由三部分构成,producer、broker、consumer,即producer生成消息,broker存储消息,consumer消费消息,其中.....
分类:
其他好文 时间:
2015-09-17 00:57:21
阅读次数:
135
import pexpect,syschild = pexpect.spawn('/home/cf/elk/Summoner/Elk/logstash/test/bin/logstash -f /home/cf/elk/Summoner/Elk/logstash/test/conf.d', time...
分类:
编程语言 时间:
2015-09-16 17:55:06
阅读次数:
237
原文地址:http://www.cnblogs.com/yjf512/p/4194012.htmllogstash,elasticsearch,kibana三件套elk是指logstash,elasticsearch,kibana三件套,这三件套可以组成日志分析和监控工具注意:关于安装文档,网络上有...
分类:
其他好文 时间:
2015-09-16 14:17:36
阅读次数:
192
1、下载kafka安装包wget http://mirrors.cnnic.cn/apache/kafka/0.8.2.1/kafka_2.11-0.8.2.1.tgz2、复制到安装目录cp kafka_2.11-0.8.2.1.tgz /usr/local/3、解压cd /usr/local/ta...
分类:
其他好文 时间:
2015-09-16 00:56:58
阅读次数:
175
流行的队列框架大致有:Memcacheq,Fqueue, RabbitMQ, Beanstalkd以及linkedin的kafka。RabbitMQ使用比较广泛,Beanstalkd是后起之秀。Beanstalkd之于RabbitMQ,就好比Nginx之于Apache,Varnish之于Squid。后面在项...
分类:
其他好文 时间:
2015-09-15 00:20:20
阅读次数:
218
原文链接:http://www.confluent.io/blog/apache-kafka-samza-and-the-Unix-philosophy-of-distributed-data作者:Martin Kleppmann译者:杰微刊-macsokolot(@gmail.com) 当我在.....
分类:
Web程序 时间:
2015-09-14 11:51:00
阅读次数:
225
简介 Apache Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发,之后成为Apache项目的一部分。Kafka是一种快速、可扩展的、设计内在就是分布式的,分区的和可复制的提交日志服务。 Apache Kafka与传统消...
分类:
Web程序 时间:
2015-09-13 07:11:58
阅读次数:
406
RabbitMQ和kafka从几个角度简单的对比 业界对于消息的传递有多种方案和产品,本文就比较有代表性的两个MQ(rabbitMQ,kafka)进行阐述和做简单的对比, 1)应用场景 RabbitMQ,遵循AMQP协议,由内在高并发的erlanng语...
分类:
其他好文 时间:
2015-09-11 19:28:56
阅读次数:
400
jdk:1.6.0_2564位kafka:2.9.2-0.8.2.1kafka 官方下载地址http://apache.fayea.com/kafka/0.8.2.1/kafka_2.9.2-0.8.2.1.tgztar-zxvfkafka_2.9.2-0.8.2.1.tgz-C/usr/local...
分类:
其他好文 时间:
2015-09-11 16:02:36
阅读次数:
500