step1、下载 下载地址：http://zookeeper.apache.org/releases.html 将下载的压缩包放到用户家目录下（其他目录也可以） step2、解压 [plain] view plain copy $tar –zxvf zookeeper-3.4.6.tar.gz [p ...
分类：
其他好文 时间：
2017-05-10 18:53:14
阅读次数：
245
目录(?)[-] 一软件环境 二创建maven工程 三添加maven依赖 四配置log4j 五启动Hadoop 六运行WordCount从本地读取文件 七运行WordCount从HDFS读取文件 八代码下载 目录(?)[-] 介绍如何在Intellij Idea中通过创建maven工程配置MapRe ...
分类：
其他好文 时间：
2017-05-10 00:16:27
阅读次数：
312
本节内容 1.Spark背景介绍 2.Spark是什么 3.Spark有什么 4.Spark部署 4.1.Spark部署的2方面 4.2.Spark编译 4.3.Spark Standalone部署 4.4.Standalone HA配置 4.5.伪分布式部署 5.Spark任务提交 5.1.Spa ...
分类：
其他好文 时间：
2017-05-07 22:02:05
阅读次数：
246
准备： 虚拟机(CentOS 6.9) JDK1.8 hadoop2.8.0 一.JDK安装及配置 rpm -ivh jdkxxxx 安装 配置环境变量 vim /etc/profile source /etc/profile 使其立即生效 java -version 验证 二. hadoop 下载 ...
分类：
其他好文 时间：
2017-05-07 10:26:26
阅读次数：
215
前两天将Hadoop2的全然分布式搭建文档整理公布于网上（http://blog.csdn.net/aaronhadoop/article/details/24859369）。朋友相邀。就再将Hadoop2的伪分布式文档整理一下，搭建过Hadoop2全然分布式后，就笑对“伪分布式”说声 呵呵吧。 前 ...
分类：
其他好文 时间：
2017-05-06 13:08:19
阅读次数：
136
很久没有更新了，主要是没有时间，今天挤出时间验证了一下，果然还是有些问题的，不过已经解决了，就发上来吧。 PS：小豆腐看仔细了哦~ 关于hadoop环境搭建，从单机模式，到伪分布式，再到完全分布式，我们这里就讨论完全分布式，关于搭建工具，有hadoop+CentOs+VMware，感觉各个版本还是有 ...
分类：
系统相关 时间：
2017-04-25 10:01:43
阅读次数：
1018
按照这篇文章：this one 安装目录：/usr/local/hadoop/hadoop-2.5.2/hive/apache-hive-1.2.2-bin 最后完成了在主机hadoop伪分布式中Hive安装 ...
分类：
其他好文 时间：
2017-04-24 12:17:56
阅读次数：
100
注意：因为是单机伪分布式配置，故同一机器上有3个server zookeeper文件格式如下 1 2 3 4 5 home zookeeper server0 zookeeper | server1 zookeeper | server2 zookeeper 1. 下载zookeeper（我用的是： ...
分类：
其他好文 时间：
2017-04-10 00:44:37
阅读次数：
282
Zookeeper 可以通过配置不同的配置文件启动 部署环境：CentOS 6.7 Zookeeper 路径： /opt/htools/zookeeper-3.4.6 操作步骤： 1 复制三份zoo.cfg 配置文件，依次命名为 zoo1.cfg zoo2.cfg zoo3.cfg， 之后分别编辑其 ...
分类：
其他好文 时间：
2017-03-31 00:49:03
阅读次数：
241
1.安装和配置JDK 具体操作见笔记 http://www.cnblogs.com/DreamDriver/p/6597178.html 2.创建Hadoop用户 为Hadoop创建一个专门的用户，可以在系统安装的时候就创建，也可以在系统安装好之后用如下命令创建： # groupadd hadoop ...
分类：
其他好文 时间：
2017-03-21 23:58:10
阅读次数：
339
