问题导读： 1.storm产生的条件是什么？ 2.storm的什么特性，使其成为不可替代？ 3.storm用什么来完成工作Topology？ 4.storm容错的原理是什么？ 场景伴随着信息科技日新月异的发展，信息呈现出爆发式的膨胀，人们...
分类：
其他好文 时间：
2015-06-11 15:00:25
阅读次数：
185
1、启动Nimbusbin/storm nimbus &2、启动Supervisorbin/storm supervisor &3、启动UIbin/storm ui &通过http://主机：8080去访问：4、列出拓扑bin/storm listTopology_name Statu...
分类：
其他好文 时间：
2015-06-11 10:45:42
阅读次数：
174
RPC：Remote Procedure CallDRPC：Distributed RPCHadoop提供了RPC的实现机制，实现方法见：《》，本文主要介绍Storm的DRPC。1、Storm DRPC工作流程Storm的DRPC由DRPC Server和一个特殊的topology组成。DRPC S...
分类：
其他好文 时间：
2015-06-10 19:19:38
阅读次数：
236
获得
org.apache.storm
storm-core
0.9.5
常用类
backtype.storm.topology.TopologyBuilder
用来建立topology。
SpoutDeclarer backtype.storm.topology.TopologyBuilder.setSpout(String id, IRichSpout spout, N...
分类：
其他好文 时间：
2015-06-10 15:48:49
阅读次数：
2505
原文链接什么是SparkApache Spark是一个围绕速度、易用性和复杂分析构建的大数据处理框架。最初在2009年由加州大学伯克利分校的AMPLab开发，并于2010年成为Apache的开源项目之一。与Hadoop和Storm等其他大数据和MapReduce技术相比，Spark有如下优势。首先，...
分类：
其他好文 时间：
2015-06-09 19:39:32
阅读次数：
130
Stream Grouping定义了一个流在Bolt任务间该如何被切分。这里有Storm提供的6个Stream Grouping类型：1. 随机分组（Shuffle grouping）：随机分发tuple到Bolt的任务，保证每个任务获得相等数量的tuple。2. 字段分组（Fields group...
分类：
其他好文 时间：
2015-06-09 19:11:06
阅读次数：
141
Stream Grouping定义了一个流在Bolt任务间该如何被切分。这里有Storm提供的6个Stream Grouping类型：
1. 随机分组（Shuffle grouping）：随机分发tuple到Bolt的任务，保证每个任务获得相等数量的tuple。
2. 字段分组（Fields grouping）：根据指定字段分割数据流，并分组。例如，根据“user-id”字段，相同“u...
分类：
其他好文 时间：
2015-06-09 17:18:08
阅读次数：
98
Storm风暴和Spark Streaming都是分布式流处理的开源框架。区别如下：
1、处理延时和吞吐量
Storm处理的是每次传入的一个事件，Spark Streaming是处理某个时间段窗口内的事件流，Storm处理一个事件可以达到秒内的延迟，而Spark Streaming则有几秒钟的延迟。因此，Spark Streaming比Storm的延时更长，但是吞吐量比Storm大。
...
分类：
其他好文 时间：
2015-06-08 23:25:42
阅读次数：
188
分析Storm-zookeeper节点
---dxwang
应用libra_pagevilewII_1420544958729(storm)在zookeeper上面节点，如下图：
节点workerbeats
描述：
每个topo对应各自worker心跳的详细信息。
每个worker心跳的详细信息：
心跳内容大概在22K(22942b)，会根据...
分类：
其他好文 时间：
2015-06-08 17:21:45
阅读次数：
142
前言
一般人对于zookeeper的绝大多数印象就是他是用来做协调服务的，不管说是Hadoop，HBase，Storm等等这些计算平台，都或多或少用到了这个zookeeper"动物管理员"。使用的方法都很简单，首先搭建一个zookeeper集群，然后在配置文件中指定一下ip:host，然后就可以用了，但是很少有人会问，zookeeper是如何进行工作的，他是如何为其他节点进行服务的呢。
2PC...
分类：
其他好文 时间：
2015-06-08 09:53:59
阅读次数：
102
