1.一定要找应用侧确认每台节点上需要监控的进程,不要盲目以为所有hadoop集群的zk、journal啥的都一样,切记! 2.被监控节点只需要安装nagios-plugin和nrpe,依赖需要安装xinetd 3.确认被监控节点上没有安装过nagios 4.确认被监控节点间、被监控节点和nagios ...
分类:
移动开发 时间:
2016-06-20 18:42:40
阅读次数:
195
public class App { private static final int SESSION_TIME = 2000; protected ZooKeeper zk; protected String host = ""; protected void connectToZK(String ...
分类:
其他好文 时间:
2016-06-19 22:45:36
阅读次数:
168
在zookeeper应用场景有关于分布式集群配置文件同步问题的描述,设想一下如果有100台机器同时对同一台机器上某个文件进行修改,如何才能保证文本不会被写乱,这就是最简单的分布式锁,本文介绍利用zk实现分布式锁。下面是写锁的实现步骤 分布式写锁 create一个PERSISTENT类型的znode, ...
分类:
其他好文 时间:
2016-06-08 15:27:25
阅读次数:
312
1808:公共子序列 1808:公共子序列 查看 提交 统计 提问 查看 提交 统计 提问 总时间限制: 1000ms 内存限制: 65536kB描述我们称序列Z = < z1, z2, ..., zk >是序列X = < x1, x2, ..., xm >的子序列当且仅当存在 严格上升 的序列< ...
分类:
其他好文 时间:
2016-06-06 20:40:19
阅读次数:
228
下面是0.8.0之前的表述,之后的已经基于Disruptor改造过了 这个文章演示了发射和转移tuple是怎么在storm中工作的 Worker为消息传递负责 当zk中的任务出现了变化或者每个task.refresh.poll.secs都会调用refresh-connections。这个东西管理和其 ...
分类:
其他好文 时间:
2016-06-04 22:10:59
阅读次数:
245
最近在开发dubbo服务的时候一直用的是公司提供的zk平台,因为使用的人太多或者没人维护老是出问题,导致dubbo服务偶尔可以调通,偶尔调不通的情况,所以花点时间自己部署一套,后面出问题还方便看日志排查。 1 下载包上传linux服务器 zookeeper-3.4.6.tar.gz 2 解压tar ...
分类:
其他好文 时间:
2016-06-02 11:30:42
阅读次数:
121
1.zk service什么情况下不可用? 2.zk写数据,什么时候才算完成? 3.zk读数据可以在任意一台zk节点上,为什么? 4.zk znode有哪些类型? 带着这些问题走进zookeeper吧。。。 zk service网络结构 zookeeper的工作集群可以简单分成两类,一个是Leade ...
分类:
其他好文 时间:
2016-06-02 00:26:55
阅读次数:
199
配置core-site.xml 配置hdfs-site.xml 配置mapred-site.xml 配置yarn-site.xml 纷发至其他节点 修改RM 2 ..N 上面的节点信息 格式化ZK hdfs zkfc -formatZK 初始化journalnode : hdfs namenode ...
分类:
其他好文 时间:
2016-05-31 14:01:21
阅读次数:
244
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,作用简单描述就是相当于一个中介,服务提供者将服务注册到zk,服务调用者直接从zk获取,zk的作用就是协调 最近碰到公司iis服务启动了,然后该服务在zk成功注册节点并且provider有了节点,但是超过20分钟没有访问后,发现pro ...
分类:
Web程序 时间:
2016-05-29 00:35:22
阅读次数:
431
1. 用orm取部分字段 a=User.objects.all().values("username","id") print a [{'username': u'admin', 'id': 1L}, {'username': u'gyf', 'id': 4L}, {'username': u'zk ...
分类:
其他好文 时间:
2016-05-27 16:21:19
阅读次数:
158