Topology校验过程[submitTopology、normalize-topology、system-topology]
分类:
其他好文 时间:
2015-09-08 18:28:47
阅读次数:
332
操作系统:contos6.5软件包如下:-rw-r--r--1roothadoop20183501Aug1316:02apache-storm-0.9.5.tar.gz-rw-r--r--1roothadoop67816Aug1312:09jzmq-master.zip-rw-r--r--1roothadoop1367275Aug1315:14zeromq-4.1.2.tar.gz-rw-r--r--1roothadoop16402010Aug1312:10zookeeper-3.4.5..
分类:
其他好文 时间:
2015-09-08 16:53:11
阅读次数:
142
一、引言: 在storm发布到0.9.x以后,配置storm将会变得简单很多,也就是只需要配置zookeeper和storm即可,而不再需要配置zeromq和jzmq,由于网上面的storm配置绝大部分都是0.9以前的storm版本,所以有很多工作是不需要进行的,下面就storm的0.9.5版本在....
分类:
系统相关 时间:
2015-09-08 12:08:54
阅读次数:
262
监控平台当前使用storm对日志进行流式分析计算,用于支撑监控数据清洗,后来逐渐在storm上搭建起数据在线关联,数据离线关联,明细数据清洗,日志搜索等功能,本章节对各功能进行简要概述。对storm不熟悉的话,建议先阅读相关文献:http://ifeve.com/getting-started-wi...
分类:
其他好文 时间:
2015-09-06 14:41:02
阅读次数:
154
worker:topology的进程。 executor:线程,由worker产生。 task:具体一个?spout/bolt的实例。 thread和task关系:一个thread可以运行多个实例,但是如果不显示设定task数量:setNumTasks(n),一个thread默认执...
分类:
其他好文 时间:
2015-09-04 12:57:45
阅读次数:
190
我用的java驱动为2.13版本 驱动的下载地址为:http://mongodb.github.io/mongo-java-driver/ 对应的API地址为:http://api.mongodb.org/java/2.13/ mongodb数据库接口的设计 package storm.db; im...
分类:
数据库 时间:
2015-09-03 19:14:35
阅读次数:
457
Redistribution Between RIP and OSPF Topology
分类:
其他好文 时间:
2015-09-01 10:25:12
阅读次数:
178
基本概念 一台物理机,运行多个拓扑。具体说就是,运行多个进程,每一个进程仅属于一个拓扑。 worker(工作进程) 是进程。 executor(执行器)是线程。 执行器运行着多个任务( task),但执行器只能执行一类组件...
分类:
其他好文 时间:
2015-08-30 23:37:40
阅读次数:
206
最近在看storm的源码,就学习分享下clojure语法。阅读目录:概述变量运算符流程控制总结概述clojure是一种运行在JVM上的Lisp方言,属于函数式编程范式,它和java可以方便的互相调用,这样开发的程序可以很好的结合java和clojure的优点(storm),这跟Net中C#和F#的角...
分类:
其他好文 时间:
2015-08-30 22:50:37
阅读次数:
142
在部署好Storm集群后,可以使用Storm提供的命令行客户端提供的帮助信息[root@sc1 ~]# stormCommands: activate 激活指定的拓扑 classpath 获取Storm客户端运行命令时使用的类路径(classpath) deactivate 禁用...
分类:
其他好文 时间:
2015-08-29 23:12:14
阅读次数:
4580