前面两章主要讲解了完全分布式的搭建,这章主要讲解服务器单机完成伪分布的搭建,介绍Hadoop配置,启动,以及简单测试。我的机器:阿里云服务器,64位,Java64,Hadoop2.4.1(64)...
分类:
其他好文 时间:
2016-05-12 22:48:12
阅读次数:
221
http://blog.csdn.net/pipisorry/article/details/51350908
Requirements
1. JDK 1.7.x + Hadoop 2.6.x
Hadoop的安装参考[Hadoop:Hadoop单机伪分布式的安装和配置]
2. protocol buffers
root@dc34d732b74d:/# apt-get update
...
分类:
其他好文 时间:
2016-05-12 18:49:03
阅读次数:
216
Hadoop 2.x伪分布式环境搭建步骤: 1、修改hadoop-env.sh、yarn-env.sh、mapred-env.sh 方法:使用notepad++(beifeng用户)代开这三个文件 添加代码:export JAVA_HOME=/opt/modules/jdk1.7.0_67 2、修改 ...
分类:
其他好文 时间:
2016-05-07 23:41:36
阅读次数:
175
本教程配置环境:
docker (virtual box / virtual machine都ok!)
ubuntu14.04(Ubuntu 12.04 /32位、64位都ok!)
hadoop 2.6.0 (原生 Hadoop 2都ok!)
皮皮blog
Docker安装和配置
# apt-get update
# apt-get install docker.io...
分类:
其他好文 时间:
2016-05-07 07:09:48
阅读次数:
156
一、安装Java
1.下载jdk-8u91-linux-x64.tar.gz文件,网址为:http://www.oracle.com/technetwork/java/javase/downloads/index.html
2.安装:
#选择一个安装路径,我选择的是/opt,并将下载的jdk-8u91-linux-x64.tar.gz文件复制到这个文件夹下
$ cd /opt
$ s...
分类:
系统相关 时间:
2016-05-06 16:00:27
阅读次数:
446
集群真是好好玩,最近一段时间天天搞集群,redis缓存服务集群啦,solr搜索服务集群啦,,,巴拉巴拉 今天说说zookeeper,之前搭建了一个redis集群,用了6台机子,有些朋友电脑跑步起来,有点卡,那这里主要说说伪分布式的集群,正式版的集群需要3台机子,我就一带而过说一说,搭建起来也是非常简 ...
分类:
其他好文 时间:
2016-05-02 02:18:25
阅读次数:
167
伪分布式安装基本思想 zookeeper的安装包保存一份,但是zoo.cfg配置多份,启动zookeeper服务器的时候指定不同的zoo.cfg即可。即启动时这样启动:zkServer.sh start zk1.cfgzkServer.sh start zk2.cfgzkServer.sh star ...
分类:
其他好文 时间:
2016-04-28 00:17:30
阅读次数:
324
一、前言很以前就搭建过hadoop的伪分布式环境,为了搭建环境特意弄的双系统,还把毕业论文给毁了。不过当时使用的是 hadoop1.x 的,而且因为一些原因,就搭建了环境,而没继续学习了。现在开始,准备好好的学习一下hadoop二、Hadoop 简介
Hadoop 是Apache软件基金会旗下的一个开源分布式计算平台
是云计算中 PaaS(平台即服务)一层的实现
HDFS 和 MapReduce 共...
分类:
编程语言 时间:
2016-04-23 07:35:51
阅读次数:
249