第一篇文章还有要修改的地方，现在我的集群已经扩展到5台（虚拟机）有些配置还要改，这一篇记录一下Hadoop HA 和zookeeper的配置，方便自己以后看。 新的HDFS中的NameNode不再是只有一个了，可以有多个（目前只支持2个）。每一个都有相同的职能。 在HDFS(HA...
分类：
其他好文 时间：
2014-09-01 02:43:42
阅读次数：
521
>>> spam, ham = 'yum', 'YUM'>>> spam'yum'>>> ham'YUM'>>> [spam, ham] = ['yum', 'YUM']>>>[spam, ham]['yum', 'YUM']>>> a,b,c,d = 'spam'>>> a's'>>> b&#
分类：
编程语言 时间：
2014-08-29 21:17:10
阅读次数：
312
Item 1: Consider static factory methods instead of constructorsAdvantage:One advantage of static factory methods is that, unlike constructors, they ha...
分类：
编程语言 时间：
2014-08-29 18:12:38
阅读次数：
262
初次在VM上配置Hadoop，开了三台虚拟机，一个作namenode,jobtracker另外两台机子作datanode,tasktracker配置好后，启动集群通过http://localhost:50700查看cluster状况Hadoop配置datanode无法连接到master发现没有dat...
分类：
其他好文 时间：
2014-08-29 15:54:18
阅读次数：
201
原题戳我Given two words word1 and word2, find the minimum number of steps required to convert word1 to word2. (each operation is counted as 1 step.)You ha...
分类：
其他好文 时间：
2014-08-28 13:04:59
阅读次数：
162
vidir-listening.sh#!/bin/bash#commanddate="/bin/date"ha="/usr/bin/hadoopfs-ls-d"#vary=`$date+%Y`m=`$date+%D|cut-d"/"-f1`d=`$date+%d`h=`$date+%H`dir="/cstreaming/DAT/${y}${m}${d}${h}*"$ha$dir|grep-v-ifound|awk‘{print$6,$7,$8}‘./dir-listening.sh2014-08-2717:0..
分类：
其他好文 时间：
2014-08-27 18:56:00
阅读次数：
188
1.Tachyon简介Tachyon是一个高容错的分布式文件系统，允许文件以内存的速度在集群框架中进行可靠的共享，就像Spark和 MapReduce那样。通过利用信息继承，内存侵入，Tachyon获得了高性能。Tachyon工作集文件缓存在内存中，并且让不同的 Jobs/Queries以及框架都能...
分类：
其他好文 时间：
2014-08-27 18:32:08
阅读次数：
454
在Havana、icehouse版本的生产环境部署中，常常会启用一个外部cron job去监控是否存在down掉的L3，如果存在则将此L3上所有绑定的VRouter重新绑定到其他L3上。...
分类：
其他好文 时间：
2014-08-27 14:43:48
阅读次数：
236
secondarynamenode异常2014-08-26 22:06:12,793 ERROR org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode: Exception in doCheckpointjava.io.IOExceptio...
分类：
其他好文 时间：
2014-08-26 22:53:46
阅读次数：
378
2014-08-26 20:27:22,712 WARN org.apache.hadoop.hdfs.server.namenode.FSNamesystem: Encountered exception loading fsimagejava.io.IOException: NameNode i...
分类：
其他好文 时间：
2014-08-26 21:20:47
阅读次数：
877
