组网说明：hadoop1.localdomain192.168.11.81（namenode）hadoop2.localdomain192.168.11.82（namenode）hadoop3.localdomain192.168.11.83(datanode)hadoop4.localdomain192.168.11.84(datanode)hadoop5.localdomain192.168.11.85(datanode)第一步：卸载openjdkrpm-qa|grepjav..
分类：
其他好文 时间：
2014-12-14 07:15:13
阅读次数：
244
Hadoop1.x中MapReduce中TopK算法（Top100算法）...
分类：
编程语言 时间：
2014-12-11 22:25:32
阅读次数：
245
1.hadoop支持的平台：
GNU/Linux平台是一个开发和生产的平台. hadoop已经被证明可以在GNU/Linux平台不是2000多个节点.
win32是一个开发平台，分布式操作还没有在win32系统上很好的测试， 所以它不被作为生产环境。
2.安装hdoop需要的软件：
linux和windows下安装hadoop需要...
分类：
其他好文 时间：
2014-12-03 15:44:24
阅读次数：
187
1.进入hbase shell
hadoop@namenode:~/hbase-0.98.8-hadoop1/conf$ hbase shell
HBase Shell; enter 'help' for list of supported commands.
Type "exit" to leave the HBase Shell
Version 0.98.8-hadoop1, r6cf...
分类：
系统相关 时间：
2014-11-30 00:43:05
阅读次数：
278
hadoop1.0 TaskTracker因为分布式缓存导致内存泄露的一次问题排查...
分类：
其他好文 时间：
2014-11-29 18:59:28
阅读次数：
131
从今天开始，开始研究学习Hadoop Common相关的源码结构。Hadoop Common在Hadoop1.0中是在core包下面的。此包下面的内容供HDFS和MapReduce公用，所以作用还是非常大的。Hadoop Common模块下的内容是比较多的。本人打算在后面的学习中挑选部分模块进行分析学习，比如他的序列化框架的实现，RPC的实现等等。我对此模块截出了一些图：...
分类：
其他好文 时间：
2014-11-29 09:02:17
阅读次数：
284
任务目标:目标一:每名学生被多少位老师教过方法一:先DISTINCT,在计数-DISTINCT能偶对所有数据去重方法二:先分组-FOREACH嵌套-使用DISTINCT首先创建一份数据源文件[hadoop@hadoop1~]$catscore.txt
James,Network,Tiger,100
James,Database,Tiger,99
James,PDE,Yao,95
Vincent,Ne..
分类：
其他好文 时间：
2014-11-26 06:49:24
阅读次数：
201
网站:http://hbase.apache.org/版本对应关系:通过lib目录下的hadoop-core-...jar可以看出适配的hadoop版本hbase-0.98.6-hadoop2=>hadoop2.2
hbase-0.96.2-hadoop2=>hadoop2.2
hbase-0.98.6-hadoop1=>hadoop1.2.1
hbase-0.96.2-hadoop1=>hadoop1.2.1Hbase安装:伪分..
分类：
其他好文 时间：
2014-11-26 06:49:20
阅读次数：
148
网站:http://hbase.apache.org/版本对应关系:通过lib目录下的hadoop-core-...jar可以看出适配的hadoop版本hbase-0.98.6-hadoop2=>hadoop2.2
hbase-0.96.2-hadoop2=>hadoop2.2
hbase-0.98.6-hadoop1=>hadoop1.2.1
hbase-0.96.2-hadoop1=>hadoop1.2.1Hbase安装:单机..
分类：
其他好文 时间：
2014-11-26 06:49:09
阅读次数：
119
网站:http://hbase.apache.org/版本对应关系:通过lib目录下的hadoop-core-...jar可以看出适配的hadoop版本hbase-0.98.6-hadoop2=>hadoop2.2
hbase-0.96.2-hadoop2=>hadoop2.2
hbase-0.98.6-hadoop1=>hadoop1.2.1
hbase-0.96.2-hadoop1=>hadoop1.2.1Hbase安装:分布..
分类：
其他好文 时间：
2014-11-26 06:47:52
阅读次数：
459
