【Hadoop】MAC下hadoop2.6安装以及执行wordcount首先简单介绍下博主的配置环境
MAC 10.10.0
hadoop 2.6
JDK 1.6(可以在shell里用jdk -version查询)
hadoop安装安装的话推荐使用mac下面的brew,理由就是用brew安装的话,它会自动给帮你配置好相应的路径。当然也可以到官网下载,注意jdk和hadoop版本要对应。brew in...
分类:
系统相关 时间:
2015-05-13 13:04:38
阅读次数:
276
版本: 使用hadoop1.1.2 JDK为java71.下载hadoop2.配置hadoop文件3测试1.下载hadoop: 1.1 在https://archive.apache.org/dist/hadoop/common/ 中下载hadoop1.1.2 , 这里注意要下载 hadoop的bi...
分类:
其他好文 时间:
2015-05-06 12:40:28
阅读次数:
157
官方TEZUI需要TEZ6+hadoop2.6.0其实TEZUITEZ0.53+hadoop2.4.0+也可以玩只要hadoop有timelineserver但是hadoop2.4.0hadoop2.5.0timelineserver不支持跨域请求。。所以用ambari2.2中的tezview来搭建可以实现,并且方便快捷。tez-site.xml<configuration><property>&l..
分类:
其他好文 时间:
2015-05-05 19:57:59
阅读次数:
3043
1、WordCount源码 将源码文件WordCount.java放到Hadoop2.6.0文件夹中。import java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configur....
分类:
其他好文 时间:
2015-05-05 10:24:24
阅读次数:
113
1、创建用户组sudo addgroup hadoop2、创建用户sudo adduser -ingroup hadoop hadoop回车之后会提示输入密码,输入自己要设定的密码然后一路回车3、为hadoop用户添加权限sudo gedit /etc/sudoers然后保存退出。4、切换用户had...
分类:
系统相关 时间:
2015-05-05 06:32:39
阅读次数:
318
初学Hadoop之环境搭建阅读目录1、安装CentOS72、安装JDK1.7.03、安装Hadoop2.6.04、SSH无密码登陆 本文仅作为学习笔记,供大家初学Hadoop时学习参考。初学Hadoop,欢迎有经验的朋友进行指导与交流!1、安装CentOS7准备 CentOS系统镜像CentOS.....
分类:
其他好文 时间:
2015-05-04 23:55:30
阅读次数:
243
一、win7下
(一)、安装环境及安装包
win7 32 bit
jdk7
eclipse-java-juno-SR2-win32.zip
hadoop-2.2.0.tar.gz
hadoop-eclipse-plugin-2.2.0.jar
hadoop-common-2.2.0-bin.rar(二)、安装
默认已经安装好了jdk、eclipse以及配置好了hadoop伪分布模式1...
本文地址:http://www.cnblogs.com/myresearch/p/hadoop-fully-distributed-operation.html,转载请注明源地址。以前安装过hadoop几个版本的单机版,主要是为了研究hadoop源代码,现在想更加深入hadoop整个生态系统,选择安...
分类:
其他好文 时间:
2015-05-03 00:43:10
阅读次数:
203
问题导读1.从本文部署实际部署,总结本地模式、伪分布、分布式的区别是什么?2.单机是否是伪分布?3.本地模式是否可以运行mapreduce?来源:about云http://www.aboutyun.com/thread-12798-1-1.htmlhadoop2.7发布,这一版不太适合用于生产环境,...
分类:
其他好文 时间:
2015-05-01 10:39:24
阅读次数:
175