tachyon1.7.1+hadoop2.6.0说明:采用两个节点分别hmaster、slave1下载安装包:tachyon-0.7.1-bin.tar.gz下载地址:http://www.tachyon-project.org/downloads/files/0.7.1/这里面解压到:/app目录中1、解压:tar-zxvftachyon-0.7.1-bin.tar.gz/app/重命名:tachyon-0.7.1tachyo..
分类:
其他好文 时间:
2015-08-28 21:45:49
阅读次数:
180
之前有幸在MOOC学院抽中小象学院hadoop体验课。这是小象学院hadoop2.X概述第一章的笔记第一章主要讲的是hadoop基础知识。老师讲的还是比较全面简单的,起码作为一个非专业码农以及数据库管理人员,也能狗大致了解其特点。后面因为8月比较忙,就主要看案例那一部分了,应用及基础部分笔记基本没怎...
分类:
其他好文 时间:
2015-08-28 21:21:09
阅读次数:
169
hadoop1
配置 mapred-site.xml,增加如下内容
mapred.jobtracker.taskScheduler
org.apache.hadoop.mapred.FairScheduler
<...
分类:
其他好文 时间:
2015-08-28 13:23:03
阅读次数:
139
文件配置:
(注:修改配置文件需要使用root用户,否则修改失败)
vim /etc/sysconfig/network
修改主机名为:HOSTNAME=Master
vim /etc/sysconfig/network-scripts/ifcfg-eth0
查看IP地址、网关、DNS服务器是否正确
vim /etc/sysconfig/network-scripts/ifcgf-et...
分类:
其他好文 时间:
2015-08-27 15:26:23
阅读次数:
230
实验的Hadoop版本为2.5.2,硬件环境是5台虚拟机,使用的均是CentOS6.6操作系统,虚拟机IP和hostname分别为: 192.168.63.171 ? ?node1.zhch 192.168.63.172 ? ?node2.zhch 192.168.63.173 ? ?node3.zhch 19...
分类:
其他好文 时间:
2015-08-25 13:03:38
阅读次数:
273
cd /opt/hbase-0.98.13-hadoop2/conf vi hbase-env.sh export JAVA_HOME=/opt/jdk1.7.0_75 ? vi hbase-site.xml <!--设置hbase根目录,master为机器的hostname--> <property> <name>hbase.rootdir</name> <valu...
分类:
编程语言 时间:
2015-08-21 16:02:07
阅读次数:
161
本文档为hadoop搭建实践文档,相关理论可到hadoop官网查看学习。
操作系统:Ubuntu14 x64位
Hadoop:Hadoop 2.7.0...
分类:
其他好文 时间:
2015-08-21 00:21:30
阅读次数:
192
说明:本文档为wordcount的mapreduce job编写及运行文档。
操作系统:Ubuntu14 x64位
Hadoop:Hadoop 2.7.0...
分类:
其他好文 时间:
2015-08-21 00:19:38
阅读次数:
214
hadoop2.6伪分布配置:http://blog.csdn.net/gamer_gyt/article/details/46793731
hive1.2 derby元数据库配置:http://blog.csdn.net/gamer_gyt/article/details/47150621
环境说明
hadoop2.6伪分布 Ubuntu14.04 ...
分类:
数据库 时间:
2015-08-19 11:16:47
阅读次数:
331
如何编译Apache Hadoop2.6.0源代码 1.安装CentOS 我使用的是CentOS6.5,下载地址是http://mirror.neu.edu.cn/centos/6.5/isos/x86_64/,选择CentOS-6.5-x86_64-bin-DVD1.iso 下载,注意是64位的,...
分类:
Web程序 时间:
2015-08-16 23:01:49
阅读次数:
390