在Storm的集群里面有两种节点：控制节点和工作节点,控制节点上面运行Nimbus进程，Nimbus负责在集群里面分配计算任务，并且监控状态。每一个工作节点上面运行Supervisor进程,Supervisor负责监听从Nimbus分配给它执行的任务，Nimbus和Supervisor之间的所有协调...
分类：
其他好文 时间：
2015-04-09 15:03:31
阅读次数：
125
JStorm之Nimbus简介一、简介 JStorm集群包含两类节点：主控节点（Nimbus）和工作节点（Supervisor）。其分别对应的角色如下： 1. 主控节点（Nimbus）上运行Nimbus Daemon。Nimbus负责接收Client提交的Topology，分发代码，分配任务给工.....
分类：
Web程序 时间：
2015-04-07 13:26:49
阅读次数：
250
基于inotify实现nodejs的提交后自动同步首先在一台server上使用nodejs+express启动一个服务器，并使用supervisor支持修改文件后自动重启的功能然后在这个工程上添加git仓库的引用（指向同一个服务器的另一个git仓库所对应的位置）然后在所有人的本地开发环境也从server仓库中cl..
分类：
其他好文 时间：
2015-04-06 06:31:54
阅读次数：
204
一直都有在使用supervisor来管理linux上的服务进程。最近有同事说有某服务貌似有问题，让上去检查一下。上去以后发现某服务反应的确很慢，所以就用supervisor重启一下。但是重启的时候就发现问题了，平时一两秒就可以完成的操作，现在竟然要几分钟！这个非常的不科学，一定要查原因！ 最开...
分类：
其他好文 时间：
2015-04-03 18:52:55
阅读次数：
315
关于Storm的高可用，有以下几个方面： (1)数据利用阶段可以通过ACK机制保证数据被处理； (2)在进程级别，worker失效，supervisor会自动重启worker线程; (3)在组件级别，supervisor节点失效，会在其他节点重启该supervisor任务； 但是一个很大...
分类：
其他好文 时间：
2015-04-03 12:55:20
阅读次数：
198
supervisor启动worker源码分析-worker.clj
分类：
其他好文 时间：
2015-04-03 10:54:56
阅读次数：
202
徐明明博客：Twitter Storm源代码分析之ZooKeeper中的目录结构 我们知道Twitter Storm的所有的状态信息都是保存在Zookeeper里面，nimbus通过在zookeeper上面写状态信息来分配任务，supervisor，task通过从zookeeper中读状态来领取任....
分类：
其他好文 时间：
2015-04-02 16:20:44
阅读次数：
178
SUPERVISOR进程管理器配置指南 1. supervisor简介 1.1. 官网 http://supervisord.org/ 1.2. 介绍 Supervisor是一个进程控制系统. 它是一个C/S系统(注意: 其提供WEB接口给用户查询和控制), 它允许用户去监控和控制...
分类：
系统相关 时间：
2015-04-02 13:33:50
阅读次数：
208
1.问题描述
需要一个python的服务程序在后台一直运行，不能让该进程被杀死，即使被杀死也要能及时自动重启。如：有一个python的程序：test.py ，通过命令：python test.py来运行程序，但是它会受命令行的中断而中断。所以我们需要一个方法来保证该程序一直在后台运行。
2.解决方法
以前经常用命令：nohup python test.py & 来保证其在...
分类：
编程语言 时间：
2015-03-30 21:18:15
阅读次数：
353
本文讲解了Storm故障容忍性(Fault-Tolerance)的设计细节：当Worker、节点、Nimbus或者Supervisor出现故障时是如何实现故障容忍性，以及Nimbus是否存在单点故障问题。当一个Worker挂了会怎样？When a worker dies, the superviso...
分类：
其他好文 时间：
2015-03-30 13:00:26
阅读次数：
172
