环境 ubuntu hadoop2.8.1 java1.8 1.配置java1.8 2.配置ssh免密登录 3.hadoop配置 环境变量 配置hadoop环境文件hadoop-env.sh core-site.xml mapred-site.xml hdfs-site.xml yarn-site. ...
分类：
系统相关 时间：
2017-10-28 23:55:26
阅读次数：
273
前言 本文搭建了一个由三节点（master、slave1、slave2）构成的Hadoop完全分布式集群（区别单节点伪分布式集群），并通过Hadoop分布式计算的一个示例测试集群的正确性。 本文集群三个节点基于三台虚拟机进行搭建，节点安装的操作系统为Centos7（yum源），Hadoop版本选取为 ...
分类：
其他好文 时间：
2017-10-28 20:32:29
阅读次数：
262
原文地址：http://www.cnblogs.com/zhangyinhua/p/7647686.html 阅读目录(Content) 一、Hadoop的三种运行模式（启动模式） 1.1、单机模式（独立模式）（Local或Standalone Mode） 1.2、伪分布式模式（Pseudo-Dis ...
分类：
其他好文 时间：
2017-10-17 16:34:19
阅读次数：
195
kafka 的topic 创建和删除试验 zookeeper和kafka 的安装，参考： http://www.cnblogs.com/caoguo/p/5958608.html 参考上述URL后，在个人的伪分布式环境下，安装了kafka 确认 zookeeper 为运行状态： $ service ...
分类：
其他好文 时间：
2017-10-16 09:47:01
阅读次数：
164
本文为Zookeeper伪分布式环境的部署，机器环境Wie 1、Centos 6.8 2、JDK为1.8.0_121 3、zookeeper版本为3.4.9 一、zookeeper伪分布式环境准备 为了方便命令输入，这里将zookeeper配置到环境变量中 在文件的末尾增加以下内容,保存退出 刷新环 ...
分类：
其他好文 时间：
2017-10-16 02:09:31
阅读次数：
256
前言 前面只是大概介绍了一下Hadoop，现在就开始搭建集群了。我们下尝试一下搭建一个最简单的集群。之后为什么要这样搭建会慢慢的分享，先要看一下效果吧！ 一、Hadoop的三种运行模式（启动模式） 1.1、单机模式（独立模式）（Local或Standalone Mode） -默认情况下，Hadoop ...
分类：
其他好文 时间：
2017-10-11 00:42:07
阅读次数：
180
1.安装SSH server、配置SSH无密码登陆Ubuntu默认安装了SSH client，还需要安装SSH server。sudo apt-get install openssh-server设置SSH无密码登陆本机ssh localhost会有如下提示(SSH首次登陆提示)，输入yes。SSH ...
分类：
系统相关 时间：
2017-10-03 17:24:33
阅读次数：
280
注：本文有参考 这篇文章 ，但因其中有部分错误，所以在实际操作中遇到了很大的困扰，于是写成了这篇文章供大家使用 一、准备 1.1创建hadoop用户 1.2安装SSH,设置SSH无密码登陆 输入完 $ ssh-keygen -t rsa 语句以后，需要连续敲击三次回车，如下图： 其中，第一次回车是让 ...
分类：
系统相关 时间：
2017-09-28 13:09:19
阅读次数：
381
前面的文章已经讲过hadoop伪分布式安装，这里直接介绍hbase伪分布式安装。 1、 下载hbase 版本hbase 1.2.6 2、 解压hbase 3、 修改hbase-env.sh 新增如下内容 4、 修改hbase-site.xml hbase.rootdir使用hadoop文件系统 hb ...
分类：
其他好文 时间：
2017-09-14 00:30:51
阅读次数：
159
