1.安装SSH server、配置SSH无密码登陆Ubuntu默认安装了SSH client,还需要安装SSH server。sudo apt-get install openssh-server设置SSH无密码登陆本机ssh localhost会有如下提示(SSH首次登陆提示),输入yes。SSH ...
分类:
系统相关 时间:
2017-10-03 17:24:33
阅读次数:
280
注:本文有参考 这篇文章 ,但因其中有部分错误,所以在实际操作中遇到了很大的困扰,于是写成了这篇文章供大家使用 一、准备 1.1创建hadoop用户 1.2安装SSH,设置SSH无密码登陆 输入完 $ ssh-keygen -t rsa 语句以后,需要连续敲击三次回车,如下图: 其中,第一次回车是让 ...
分类:
系统相关 时间:
2017-09-28 13:09:19
阅读次数:
381
前面的文章已经讲过hadoop伪分布式安装,这里直接介绍hbase伪分布式安装。 1、 下载hbase 版本hbase 1.2.6 2、 解压hbase 3、 修改hbase-env.sh 新增如下内容 4、 修改hbase-site.xml hbase.rootdir使用hadoop文件系统 hb ...
分类:
其他好文 时间:
2017-09-14 00:30:51
阅读次数:
159
一、前言 ZooKeeper的功能特性通过ZooKeeper配置文件来进行控制管理( zoo.cfg配置文件)。 ZooKeeper这样的设计其实是有它自身的原因的。通过前面对ZooKeeper的配置可以看出,对ZooKeeper集群进行配置的时候,它的配置文档是完全相同的(对于集群伪分布模式来说, ...
分类:
其他好文 时间:
2017-09-10 12:35:50
阅读次数:
1286
zookeeper是一个为分布式应用所设计的分布式的、开源的调度服务,它主要用来解决分布式应用中经常遇到的一些数据管理问题,简化分布式应用,协调及其管理的难度,提高性能的分布式服务。 本章的目的:如何安装zookeeper(在win7环境下),zookeeper下载https://mirrors.c ...
一、实验目的 了解Hadoop的MapeReduce工作原理 二、实验内容 实现基于单机的伪分布式运行模拟 三、实验需要准备的软件和源 1、Jdk1.6以上 下载地址:http://www.oracle.com/technetwork/java/javase/downloads/index.html ...
分类:
其他好文 时间:
2017-09-08 21:45:15
阅读次数:
265
一、概述1.实验使用的Hadoop集群为伪分布式模式,eclipse相关配置已完成;2.软件版本为hadoop-2.7.3.tar.gz、apache-maven-3.5.0.rar。二、使用eclipse连接hadoop集群进行开发1.在开发主机上配置hadoop①将hadoop-2.7.3.tar.gz解压到本地主机上②使用windows版本的hadoop中的bi..
分类:
系统相关 时间:
2017-09-07 14:48:47
阅读次数:
209
0.前言前面一篇《Hadoop初体验:快速搭建Hadoop伪分布式环境》搭建了一个Hadoop的环境,现在就使用Hadoop自带的wordcount程序来做单词统计的案例。1.使用示例程序实现单词统计(1)wordcount程序wordcount程序在hadoop的share目录下,如下:[root@leafmapreduce]#pwd
/usr/loca..
分类:
其他好文 时间:
2017-09-03 23:54:37
阅读次数:
229
配置 ubuntu14.04 伪分布式 hadoop1.04 wordcount入门程序, 摘自hadoop基础教程 ...
分类:
其他好文 时间:
2017-09-01 23:07:11
阅读次数:
124