首先保证JDK、Hadoop安装设置成功可以参考[linux]ubuntu下安装hadoop[linux]ubutnu12.04 下安装jdk1.7使用hadoop版本为1.2.1,jdk为1.7在hadoop-1.2.1\src\examples\org\apache\hadoop\example...
分类:
其他好文 时间:
2014-08-15 21:06:49
阅读次数:
636
一、概述Hadoop的版本更新挺快的,已经到了2.4,但是其周边工具的更新速度还是比较慢的,一些旧的周边工具版本对hadoop2.x的兼容性做得还不完善,特别是sqoop。最近,在为hadoop2.2.0找适合的sqoop版本时遇到了很多问题。尝试了多个sqoop1.4.x版本的直接简单粗暴的报版本不兼容..
分类:
其他好文 时间:
2014-08-15 18:06:49
阅读次数:
548
1、在Ubuntu下创建hadoop用户组和用户2、在Ubuntu下安装JDK(可以在官网下载linux包然后解压安装)3、hadoop下载:http://www.apache.org/dyn/closer.cgi/hadoop/common/因为64位ubuntu需要编译源文件:故下载hadoop...
分类:
其他好文 时间:
2014-08-15 17:29:09
阅读次数:
241
MaxTemperature.java package cn.kissoft.hadoop.week05;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduc...
分类:
其他好文 时间:
2014-08-15 14:54:39
阅读次数:
307
转自:http://blog.csdn.net/qwertyu8656/article/details/6426054 用0.20.2版本 有些类已经过时 但必须要用 因为新版本对数据库连接支持不够 ? 运行mysql创建数据库School,建立teacher表,并自行填写值 [c-sha...
分类:
数据库 时间:
2014-08-15 14:54:29
阅读次数:
289
转自:http://www.cnblogs.com/liqizhou/archive/2012/05/16/2503458.html 前以前帖子介绍,怎样读取文本数据源和多个数据源的合并:http://www.cnblogs.com/liqizhou/archive/2012/05/15/2501835.html 这一个博客...
分类:
数据库 时间:
2014-08-15 13:04:39
阅读次数:
285
Hadoop的MR作业支持链式处理,类似在一个生产牛奶的流水线上,每一个阶段都有特定的任务要处理,比如提供牛奶盒,装入牛奶,封盒,打印出厂日期,等等,通过这样进一步的分工,从而提高了生产效率,那么在我们的Hadoop的MapReduce中也是如此,支持链式的处理方式,这些Mapper像Linux管道...
分类:
移动开发 时间:
2014-08-15 12:43:28
阅读次数:
285
下面开始hadoop的安装与配置;(1)安装jdk我安装的是JDK1.7.0_40,windows x64版的下载完之后,直接点击安装,我的安装路径为默认路径:C:\Program Files\Java\jdk1.7.0_40;安装完毕后,设置环境变量:JAVA_HOME指向JDk安装目录PATH指...