一、 准备 1、 硬件 三台装好RHEL6.7_x64的x86服务器，机器名如下 storm01 storm02 storm03 2、 软件 jdk-7u80-linux-x64.rpm apache-storm-1.0.1.zip 3、 zookeeper storm需用到zookeeper，开始 ...
分类：
其他好文 时间：
2017-02-16 00:11:08
阅读次数：
196
手工安装Storm集群 注：最新的Storm已不再必须依赖ZeroMQ，各种依赖的库和软件也已经有更新的版本。 要手工安装Storm，需要先安装以下软件 Zookeeper集群（安装方法详见管理向导） Java6.0 Python2.6.6 Unzip命令 NOTE: Nimbus和管理进程将要依赖 ...
分类：
其他好文 时间：
2017-02-07 20:53:54
阅读次数：
195
心跳检测的概念在分布式架构中，比如Hadoop集群，Storm集群等，或多或少都涉及到Master/Slave的概念，往往是一个或者多个Master和N个Slave之间进行通信。那么通常Master应该需要知道Slave的状态，Slave会定时的向Master进行发送消息，相当于告知Master：“我还活着，我现在在做..
分类：
Web程序 时间：
2017-02-05 15:42:09
阅读次数：
1411
Storm，核心代码使用clojure书写，实用程序使用python开发，使用java开发拓扑。 Storm集群表面类似Hadoop集群。但在Hadoop上你运行的是”MapReduce jobs”，在Storm上你运行的是”topologies”。”Jobs”和”topologies”是大不同的， ...
分类：
其他好文 时间：
2017-01-10 12:03:27
阅读次数：
200
一 storm 相关术语 二 storm集群架构图 2. 数据处理流程 3. 拓扑图分析 storm主要特点 storm与 yarn结合 ，storm 运行在yarn之上 storm安装 ...
分类：
其他好文 时间：
2016-12-21 18:30:31
阅读次数：
206
配置storm集群的过程中出现写问题，记录下来 1.storm是通过zookeeper管理的，先要安装zookeeper，从zk官网上下来，我这里下下来的的3.4.9,下载后移动到/usr/local,并解压。 tar -zxvf zookeeper-3.4.9.tar.gz 2.进入conf目录， ...
分类：
其他好文 时间：
2016-12-05 19:16:31
阅读次数：
207
文章地址 1. 一些词汇和技术 1）Zookeeper注册中心 Storm集群 2. 核心思想 1）【概述】 消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。 目前在生产环境，使用较多的 ...
分类：
Web程序 时间：
2016-11-18 22:46:45
阅读次数：
277
序：在开发storm项目时，提交项目jar包当把依赖的第三方jar包都打进去提交storm集群启动时报了发现多个同名的文件错误由此开始了一段对jar包的深刻理解之路。 java.lang.RuntimeException: Found multiple defaults.yaml resources ...
分类：
编程语言 时间：
2016-10-26 00:39:17
阅读次数：
678
本博文的主要内容有 .storm单机模式，打包，放到storm集群 .Storm的并发机制图 .Storm的相关概念 .附PPT 打包，放到storm集群去。我这里，是单机模式下的storm。 weekend110-storm -> Export -> JAR file -> 当然，这边，肯定是，准 ...
分类：
其他好文 时间：
2016-10-16 09:43:35
阅读次数：
574
Storm集群部署以及使用Storm中产生的问题以及相应的解决方案 ...
分类：
其他好文 时间：
2016-10-15 16:59:33
阅读次数：
371
