hadoop版本1.2.1jdk1.7.0例3-1、通过URLStreamHandler实例以标准输出方式显示Hadoop文件系统的文件hadoop fs -mkdir input在本地创建两个文件file1，file2，file1的内容为hello world，file2内容为hello Hado...
分类：
其他好文 时间：
2014-08-16 11:09:30
阅读次数：
377
本文所用环境为3台hadoop2.2，hbase已经安装完毕，具体安装可参照前两篇文章。hive适用的元数据库为mysql，所以master上要安装mysql，用系统自带的即可，这里不在详述。(1)安装hive解压#tarzvxfhive-0.12.0.tar.gz-C/usr
#cd/usr
#mvhive-0.12.0hive2.替换jar包，保持hbase0.96..
分类：
其他好文 时间：
2014-08-16 09:49:41
阅读次数：
303
hadoop yarn里用了RPC调用。NM里面文件本地化类ContainerLocalizer用RPC心跳方式跟本机的ResourceLocalizationService通信。用shared memory还要调到native层去，不知道会不会比tcp/ip快？可以用文件，考虑锁的问题。但是文件貌...
分类：
其他好文 时间：
2014-08-15 22:22:39
阅读次数：
220
首先保证JDK、Hadoop安装设置成功可以参考[linux]ubuntu下安装hadoop[linux]ubutnu12.04 下安装jdk1.7使用hadoop版本为1.2.1，jdk为1.7在hadoop-1.2.1\src\examples\org\apache\hadoop\example...
分类：
其他好文 时间：
2014-08-15 21:06:49
阅读次数：
636
一、概述Hadoop的版本更新挺快的，已经到了2.4，但是其周边工具的更新速度还是比较慢的，一些旧的周边工具版本对hadoop2.x的兼容性做得还不完善，特别是sqoop。最近，在为hadoop2.2.0找适合的sqoop版本时遇到了很多问题。尝试了多个sqoop1.4.x版本的直接简单粗暴的报版本不兼容..
分类：
其他好文 时间：
2014-08-15 18:06:49
阅读次数：
548
1、在Ubuntu下创建hadoop用户组和用户2、在Ubuntu下安装JDK（可以在官网下载linux包然后解压安装）3、hadoop下载：http://www.apache.org/dyn/closer.cgi/hadoop/common/因为64位ubuntu需要编译源文件：故下载hadoop...
分类：
其他好文 时间：
2014-08-15 17:29:09
阅读次数：
241
MaxTemperature.java package cn.kissoft.hadoop.week05;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduc...
分类：
其他好文 时间：
2014-08-15 14:54:39
阅读次数：
307
转自：http://blog.csdn.net/qwertyu8656/article/details/6426054 用0.20.2版本 有些类已经过时 但必须要用 因为新版本对数据库连接支持不够 ? 运行mysql创建数据库School，建立teacher表，并自行填写值 [c-sha...
分类：
数据库 时间：
2014-08-15 14:54:29
阅读次数：
289
