码迷,mamicode.com
首页 >  
搜索关键字:ELK Beats kafka    ( 5750个结果
Zookeeper 日志输出到指定文件夹
最近在研究Zookeeper Storm Kafka, 顺便在本地搭了一套集群, 遇到了Zookeeper日志问题输出路径的问题, 发现zookeeper设置log4j.properties不能解决日志路径问题, 发现解决方案如下:1. 修改log4j.properties, 这个大家都应该会改, ...
分类:其他好文   时间:2014-09-04 23:31:00    阅读次数:607
Kafka 0.8 配置参数解析
http://kafka.apache.org/08/configuration.html Broker Configs 4个必填参数, broker.id Each broker is uniquely identified by a non-negative integer id broker唯...
分类:其他好文   时间:2014-09-04 18:33:49    阅读次数:174
kafka删除topic的方法
0.8的官方文档提供了一个删除topic的命令:kafka-topics.sh--delete但是在运行时会报错找不到这个方法。kafka-topics.sh最终是运行了kafka.admin.TopicCommand这个类,在0.8的源码中这个类中没有找到有deletetopic相关的代码。在kafka的admin包下,提供了一个DeleteTopicComman..
分类:其他好文   时间:2014-09-03 02:42:26    阅读次数:1415
Kafka集群安装
安装Kafka集群 假设我们有集群中,需要配置4个broker,形成下面图表的Kafka集群。 2.1 配置文件        配置所有的Kafka的Producer文件,其中,brokerpid的值是独一无二的数字值。几个核心属性如下: # The id of the broker.This must be set to a unique integer for each broke...
分类:其他好文   时间:2014-08-29 11:05:47    阅读次数:293
Kafka编程实例
编程     Producer是一个应用程序,它创建消息并发送它们到Kafka broker中。这些producer在本质上是不同。比如,前端应用程序,后端服务,代理服务,适配器对于潜在的系统,Hadoop对于的Producer。这些不同的Producer能够使用不同的语言实现,比如java、C和Python。下面的这部图表解释了消息producer的Kafka API. 下面将详...
分类:其他好文   时间:2014-08-29 11:03:57    阅读次数:277
Kafka介绍
Apache Kafka是一个开源、分布式发布订阅消息系统,主要设计了下面这些特性:       l  持久化消息:从大数据中提取真正的数据值,任何类型的数据丢失都不能够再获取。Apache Kafka提供了持续时间存储大容量消息,其容量按顺心可以达到TB。       l  高吞吐量:为大数据而生,Kafka就是运行在商业硬件上而设计的,它支持每秒百万消息量。       l  分布式:A...
分类:其他好文   时间:2014-08-29 11:03:47    阅读次数:235
开放能否让苹果成为智能家居的标准制定者?
苹果今年的WWDC有些特殊,众所周知,在以往,苹果总会发布一些硬件产品以获得市场的关注,而在今年的WWDC上,苹果不仅没有发布大家期望的可穿戴设备,也没有发布贴上Beats标签的耳机,不过,苹果却发布了HomeKit和Swift,这两者也足以让我们看到苹果的诚意,以及苹果未来的发展战略和方向。     HomeKit能否让苹果成为智能家居的标准制定者?     ...
分类:移动开发   时间:2014-08-27 10:55:47    阅读次数:288
Secrets of the Furious Five/Transcript
[Po and Shifu are racing each other up the palace stairs.]SHIFU:Are you ready?PO:Ready's my middle name![Po speeds off ahead, and beats Shifu to their...
分类:其他好文   时间:2014-08-25 09:52:14    阅读次数:354
Kafka 之 中级
1.??? 配置 ?? Broker主要配置 ? 参数 默认值 说明(解释) broker.id =0 每一个broker在集群中的唯一表示,要求是正数。当该服务器的IP地址发生改变时,broker.id没有变化,则不会影响consumers的消息情况 ...
分类:其他好文   时间:2014-08-21 11:45:34    阅读次数:389
Flume+Kafka+Strom基于分布式环境的结合使用
目录: 一、Flume、Kafka、Storm是什么,如何安装? 二、Flume、Kafka、Storm如何结合使用? 1) 原理是什么? 2) Flume和Kafka的整合 3) Kafka和Storm的整合 4) Flume、Kafka、Storm的整合 一、Flu...
分类:其他好文   时间:2014-08-19 20:39:55    阅读次数:750
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!