码迷,mamicode.com
首页 >  
搜索关键字:storm topology    ( 1867个结果
Storm原理和概念详解
Storm的集群结构Storm与Hadoop的架构对比 主节点 工作节点 作业Storm Numbus Supervisor toplogies(拓扑),死循环Hadoop JobTracker TaskTracker MapReduce Job,执行完成立即结...
分类:其他好文   时间:2015-08-02 21:31:41    阅读次数:539
hdu 3342 Legal or Not(给一个有向图判断该图是否拓扑有序)
代码:#include #include using namespace std; int n,m; int mat[105][105]; int in[105]; int Stack[105],top; void topo() { top=0; for(int i=0; i<n; i++) { if(in[i]==0) { ...
分类:其他好文   时间:2015-08-02 16:56:26    阅读次数:122
hdu 1285 确定比赛名次(给一个拓扑有序图要求输出拓扑有序序列)
1.如果有向图无回路,那么该图拓扑有序。 2代码: #include #include using namespace std; int mat[505][505]; int n,m; int in[505]; void topological_sort() { int cnt=n; while(cnt--) { int i; for...
分类:其他好文   时间:2015-08-02 01:06:26    阅读次数:125
hdu 2647 Reward(拓扑排序)
1.反向建图,有利于计算 2.代码:#include #include #include #define Max(a,b) ((a)>(b)?(a):(b)) using namespace std; typedef struct ArcNode { int adjvex; struct ArcNode * nextarc; } ArcNode; typedef struct...
分类:编程语言   时间:2015-08-01 14:18:10    阅读次数:130
Storm的并发概念
在Spouts和bolts中出现了Executors 执行器和Tasks 任务的概念在Toplogy 中有个workers,Toplogy运行在workers上面,Workers 上面一般指进程数Storm集群中的一台机器 可以运行一个或多个workers process,workers大小可以设置...
分类:其他好文   时间:2015-07-31 21:54:02    阅读次数:359
Storm的简介
数据来源:HADOOP是HDFS上某个文件夹下的可能是成TB的数据,STORM是实时新增的某一笔数据;Hadoop与Storm的比较处理过程:HADOOP是分MAP阶段到REDUCE阶段,STORM是由用户定义处理流程,流程中可以包含多个步骤,每个步骤可以是数据源(SPOUT)或处理逻辑(BOLT)...
分类:其他好文   时间:2015-07-31 21:51:12    阅读次数:201
Strom之WordCount
新建Maven项目 org.apache.storm storm-core 0.9.2-incubating JavaCode 1 package mystorm; 2 3 import java.io.File; 4 import java.io.IOException; 5...
分类:其他好文   时间:2015-07-31 21:50:23    阅读次数:141
Storm集群的搭建
集群结构 Storm集群表面类似Hadoop集群。但在Hadoop上你运行的是”MapReduce jobs”,在Storm上你运行的是”topologies”。”Jobs”和”topologies”是大不同的,一个关键不同是一个MapReduce的Job最终会结束,而一个topology永远处理消...
分类:其他好文   时间:2015-07-31 21:45:47    阅读次数:194
1.Storm 安装手册和提交Topology
目录(一)搭建单机storm集群一、下载所需要的资源二、资源解压三、安装JDK四、安装依赖的库文件五、安装ZMQ六、安装jzmq七、启动zookeeper八、启动storm九、在UI端访问十、编译storm-start jar包十一、storm-starter源码导出十二、提交Topology(二)...
分类:其他好文   时间:2015-07-31 14:39:51    阅读次数:385
[转载] 使用 Twitter Storm 处理实时的大数据
转载自http://www.ibm.com/developerworks/cn/opensource/os-twitterstorm/流式处理大数据简介Storm 是一个开源的、大数据处理系统,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解 Twitter Storm、它的架构,以及批处...
分类:其他好文   时间:2015-07-28 20:16:33    阅读次数:120
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!