HBase集群已安装好,在使用了其内置的zookeeper集群出现问题无法解决后改用自己安装的zookeeper集群,HBase集群可成功启动。1、在/home/instal目录下,解压zookeeper-3.4.6到该目录下tar-zxvfzookeeper-3.4.6.tar.gz-C/home...
分类:
其他好文 时间:
2015-01-14 17:50:36
阅读次数:
122
在用华为的hindex-0.94.8时,出现HMaster启动后很短时间内自动关闭的情况,网上查询说是zookeeper的原因,在万般整修无果舍弃了其内部自带的zookeeper集群,自己安装了zookeeper-3.4.6重启后可以正常使用集群。但是出现一个问题,之前的HBase数据库中的表...
分类:
其他好文 时间:
2015-01-14 16:46:16
阅读次数:
155
NimbusServer相当于hadoop里的JobTracker或yarn里的ResourceManager,在集群中属于首脑地位,负责分发任务,监控集群状态,与supervisor的通信主要通过Zookeeper。nimbus在启动过程中会做以下工作,以保证集群稳定运行:
1、清理无效topology
2、建立zk连接并创建相应znode
3、启动监控线程
4、启动httpserver...
分类:
Web程序 时间:
2015-01-13 15:58:30
阅读次数:
403
Hadoop家族系列文章,主要介绍Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa,新增加的项目包括,YARN, Hcatalog, Oozie, Cassandra,...
分类:
Web程序 时间:
2015-01-13 01:28:23
阅读次数:
278
转载请注明出处: jiq?钦's
technical Blog
经过我的测试,得出关于会话终止的下列结论:
客户端创建ZooKeeper实例连接到ZooKeeper服务端,设置会话超时时间为10s。
(1)若强制关闭ZooKeeper服务端(模拟其崩溃),客户端立马收到Disconnected连接断开事件,等待半个小时,再次启动ZooKeeper服务端,客户端收到SyncConnec...
分类:
其他好文 时间:
2015-01-12 22:33:06
阅读次数:
280
客户端环境搭建:1.svn中导入phoenix。2.import,existing maven project,导入phoenix子项目3.新建maven项目, pom.xml参考服务端项目; 编写dubbo配置文件4.组装参数,写测试用例,执行测试用例备忘
分类:
其他好文 时间:
2015-01-12 16:03:21
阅读次数:
237
三个类:
ServiceAProvider
ServiceBProvider
ServiceConsumer
其中
ServiceAProvider提供的服务名service-A,指向IP为192.168.58.130
ServiceBProvider提供的服务名service-A,指向IP为192.168.58.131
当有消费者请求时,随机地选取service-A列表的服务器提供服务
ServiceConsumer 为消费者类
依赖:
org.apach...
分类:
其他好文 时间:
2015-01-12 00:29:20
阅读次数:
219
最近大概看了ZooKeeper和Mina的源码发现都是用Java NIO实现的,所以有必要搞清楚什么是NIO。
BIO:同步阻塞式IO,服务器实现模式为一个连接一个线程,即客户端有连接请求时服务器端就需要启动一个线程进行处理,如果这个连接不做任何事情会造成不必要的线程开销,当然可以通过线程池机制改善。
NIO:同步非阻塞式IO,服务器实现模式为一个请求一个线程,即客户端发送的连接请求都...
分类:
其他好文 时间:
2015-01-11 23:02:52
阅读次数:
516