[Spark亚太研究院 决战云计算大数据时代 100期公益大讲堂 互动问答]Q1:我想问,hdfs的namenode挂了,怎么处理? 使用ZooKeeper; 使用Mesos; 使用Yarn;Q2:用python和scala区别大吗? 就代码的风格而言是不大的; 世界上也有很多人使用python开发...
分类:
其他好文 时间:
2014-07-16 19:09:29
阅读次数:
294
由于内核版本问题,最初仅Ubuntu可以较好的支持Docker。不过,由于RedHat系列OS(REHL、CentOS)是目前主流的Linux服务器操作系统,所以令RedHat系列OS支持Docker很有必要。目前Docker和RedHat已经展开深入合作,并在2013年年底推出了可以在RedHat...
分类:
其他好文 时间:
2014-07-16 18:31:04
阅读次数:
252
本文内容并非原创,使用资料均来自互联网。dubbo使用了zkClient而不是使用zookeeper本身的客户端与zookeeper进行交互,为什么呢?先看看zookeeper本身自带的客户端的问题。1)ZooKeeper的Watcher是一次性的,用过了需要再注册;2)session的超时后没有自...
分类:
其他好文 时间:
2014-07-16 17:48:15
阅读次数:
239
本文摘自dubbo的官方文档,原文请参见:http://alibaba.github.io/dubbo-doc-static/User+Guide-zh.htm#UserGuide-zh-Zookeeper%E6%B3%A8%E5%86%8C%E4%B8%AD%E5%BF%83如转发,请标明文章来源...
分类:
其他好文 时间:
2014-07-16 17:46:45
阅读次数:
278
有时候发现docker有的指令必须加sudo才能执行,通过以下三步设置便可不加sudo直接执行docker指令:
1. 如果还没有docker group就添加一个:
sudo groupadd docker
2.将用户加入该group内。然后退出并重新登录就生效啦。
sudo gpasswd -a ${USER} docker
3.重启docker
sudo ...
分类:
其他好文 时间:
2014-07-15 22:35:42
阅读次数:
289
docker images往往不知不觉就占满了硬盘空间,为了清理冗余的image,可采用以下方法:
1.进入root权限
sudo su
2.停止所有的container,这样才能够删除其中的images:
docker stop $(docker ps -a -q)
如果想要删除所有container的话再加一个指令:
docker rm $(docker ps -a -...
分类:
其他好文 时间:
2014-07-15 22:33:51
阅读次数:
527
启动docker的时候的指令使用
sudo docker -H tcp://0.0.0.0:4243 -H unix:///var/run/docker.sock -d &
这样就能使docker听取host得到的任何ip的指令,从而就能从host之外的机器连接到docker container了...
分类:
其他好文 时间:
2014-07-15 22:26:08
阅读次数:
275
集群安装总览参见这里Zookeeper的配置 1,/etc/profile中加入zk的路径设置,见上面背景说明。 2,进入~/zk/conf目录,复制zoo_sample.cfg为zoo.cfg vim zoo.conftickTime=2000initLimit=10syncLimit=5dat....
分类:
其他好文 时间:
2014-07-14 23:08:46
阅读次数:
430
Curator提供了对zookeeper客户端的封装,并监控连接状态和会话session,特别是会话session过期后,curator能够重新连接zookeeper,并且创建一个新的session。对于zk的使用者来说,session的概念至关重要,如果想了解更多session的说明,请访问:ht...
分类:
其他好文 时间:
2014-07-14 19:02:28
阅读次数:
254
ZooKeeper Programmer's GuideDeveloping Distributed Applications that use ZooKeeperhttp://zookeeper.apache.org/doc/trunk/zookeeperProgrammers.htmlZooKe...
分类:
其他好文 时间:
2014-07-14 15:34:05
阅读次数:
208