1. 在VirtualBox中安装Ubuntu 14.04 2. 在Ubuntu 14.04中安装Docker 3. 安装基于Docker的Hadoop 下载image docker pull sequenceiq/hadoop-docker:2.6.0 运行container docker run...
前言 hadoop是分布式系统，运行在linux之上，配置起来相对复杂。对于hadoop1，很多同学就因为不能搭建正确的运行环境，导致学习兴趣锐减。不过，我有免费的学习视频下载，请点击这里。 hadoop2出来后，解决了hadoop1的几个固有缺陷，比如单点故障、资源利用率低、支持作业类型少等问题，...
分类：
其他好文 时间：
2015-01-03 13:11:26
阅读次数：
310
Hive安装部署（安装会有版本问题 hadoop1.0版本以上的请安装hive-0.90测试hadoop2.0以上请安装hive-0.12.0或者最新版测试）hive-0.9.0 下载地址：http://pan.baidu.com/s/1rj6f8hive-0.12.0下载地址：http://mir...
分类：
其他好文 时间：
2015-01-02 17:26:11
阅读次数：
307
1.伪分布式的安装1.1修改ip(1)打开VMWare或者VirtualBox的虚拟网卡(2)在VMWare或者VirtualBox设置网络连接方式为host-only(3)在linux中，修改ip。有上角的图标，右键，选择Edit Connections....****ip必须与windows下虚...
分类：
其他好文 时间：
2015-01-02 17:20:39
阅读次数：
303
Hadoop1.0.0学习笔记一．安装JDK,配置环境JAVA环境变量exportJAVA_HOME=/home/ligang/jdk1.6.0_26exportJRE_HOME=/home/ligang/jdk1.6.0_26/jreexportCLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH二．安装Hadoop-1.0.01.下载hadoop文件，地址为：http://hadoop.apache..
分类：
其他好文 时间：
2014-12-31 18:39:02
阅读次数：
266
Hadoop2.x之后没有Eclipse插件工具，我们就不能在Eclipse上调试代码，我们要把写好的java代码的MapReduce打包成jar然后在Linux上运行，所以这种不方便我们调试代码，所以我们自己编译一个Eclipse插件，方便我们在我们本地上调试，经过hadoop1.x的发展，编译hadoop2.x版本的eclipse插件比之前简单多了。接下来我 们开始编译Hadoop-eclipse-plugin插件，并在Eclipse开发Hadoop...
一、查看Linux主机名 [root@localhost ~]# hostname localhost.localdomain 二、重命名主机名（以hadoop1为新主机名为例） 第一步： [root@localhost ~]# hostname hadoop1 第二步：修改 /etc/sysconfig/network...
分类：
系统相关 时间：
2014-12-22 21:25:46
阅读次数：
1243
这次配置的环境是Hadoop1.2.1版本，Hadoop在13年推出了Hadoop2.0版本，该版本在Hadoop1.0版本的基础上作了较大的改动，提升了Hadoop集群任务调度、资源分配以及故障处理方面的效率。 Hadoop2.0在Hadoop1.0的基础上，首先对HDFS作了改动，在Had...
分类：
其他好文 时间：
2014-12-19 14:10:00
阅读次数：
147
YARN
Hadoop2.0与HAdoop1.0的区别：
Hadoop1.0主要由HDFS和MapReduce两个系统够长，但在Hadoop2.0中主要由 Hadoop Common、HDFS 、Hadoop YARN和Hadoop MapReduce2.0构成。
Hadoop1.0更多是在于离线的...
分类：
其他好文 时间：
2014-12-18 14:56:59
阅读次数：
244
