码迷,mamicode.com
首页 >  
搜索关键字:topology    ( 328个结果
HACMP
第三方 HACMP概念 HACMP概念 Cluster Node Topology Resource Resource group 用于系统保护的一组资源集合 Application server 受Hacmp控制的一组应用的启动和停止脚本 Reintegration 一个发生失败的节点,重新加入c ...
分类:其他好文   时间:2017-08-21 00:26:20    阅读次数:229
Storm调度
一、storm计算框架 :性能优化的第一步就是找到瓶颈在哪里,从瓶颈处入手,解决关键点问题,事半功倍。 除了通过系统命令查看CPU使用,jstack查看堆栈的调用情况以外,还可以通过Storm自身提供的信息来对性能做出相应的判断。 在Storm 的UI中,对运行的topology提供了相应的统计信息 ...
分类:其他好文   时间:2017-08-14 16:39:12    阅读次数:633
RouterOS 设定NAT loopback (Hairpin NAT)回流
In the below network topology a web server behind a router is on private IP address space, and the router performs NAT to forward traffic to its publi ...
分类:其他好文   时间:2017-08-01 14:26:47    阅读次数:745
JStorm与Storm源码分析(三)--Scheduler,调度器
Scheduler作为Storm的调度器,负责为Topology分配可用资源。 Storm提供了IScheduler接口,用户可以通过实现该接口来自定义Scheduler。 其定义如下: 真正选择哪个调度器来对Topology进行分配的方法是mk-assignments。 mk-assignment ...
分类:Web程序   时间:2017-07-28 16:43:29    阅读次数:297
Storm集群上的开发 ,Storm的内部原理,storm提交任务的过程 (八)
storm提交任务的过程: 1.客户端通过storm提交topology 2.nimbus主节点创建本地topology任务目录。tmp 3.nimbus监控zookeeper心跳,计算工作量。 4.nimbus向zookeeper分配任务。 5.从节点监控zk的数据,一旦有新任务分配,启动任务to ...
分类:其他好文   时间:2017-07-22 23:40:18    阅读次数:245
Storm集群上的开发 ,Topology任务的编写 之 WordCount Spout和Blot的分组策略(一张图说明问题)(五)
Storm的数据从Spout采集后,交给Blot组件处理,数据在Blot之间流动时,会涉及到数据流动的方向。这就是Storm的分组策略。 从WordCount的单词拆分到单词计数,会使用按字段的分组策略来拆分单词,并分配到不同的Count Blot中计算。 ...
分类:其他好文   时间:2017-07-22 00:05:30    阅读次数:197
Storm集群上的开发 ,Topology任务的编写 之 WordCount程序的编写(六)
由之前的学习,Storm的程序构成有Topology,Spout、Blot组成。 构建工程第一步 :引入jar,把storm集群中的/usr/local/apps/apache-storm-1.0.3/lib目录jar包全部引入 ...
分类:其他好文   时间:2017-07-22 00:05:05    阅读次数:208
Storm集群上的开发 ,Topology任务的编写 之 WordCountTopology数据流分析(storm编程模型)(一张图说明问题)(四)
WordCountTopology数据流分析(storm编程模型) 上一章的example的单词统计在storm的数据流动到底是怎么进行的呢,这一章节开始介绍; ...
分类:其他好文   时间:2017-07-21 01:17:44    阅读次数:177
Storm的并行度、Grouping策略以及消息可靠处理机制简介
转自:https://my.oschina.net/zc741520/blog/409949 概念: Workers (JVMs): 在一个节点上可以运行一个或多个独立的JVM 进程。一个Topology可以包含一个或多个worker(并行的跑在不同的machine上), 所以worker proc ...
分类:其他好文   时间:2017-07-05 13:41:32    阅读次数:168
storm 消息确认机制及可靠性
worker进程死掉 在一个节点 kill work进程 比方 kill 2509 对work没有影响 由于会在其它节点又一次启动进程运行topology任务 supervisor进程死掉 supervisor进程kill掉 对work进程没有影响 由于他们是互相独立的!。 nimbus进程死掉(存 ...
分类:其他好文   时间:2017-06-17 12:07:40    阅读次数:128
328条   上一页 1 ... 8 9 10 11 12 ... 33 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!