在上一篇博文我们对Nutch进行了hadoop的配置,那么本文就对nutch的deploy模式的使用进行说明。...
分类:
其他好文 时间:
2016-05-22 12:12:49
阅读次数:
186
在之前的博文中,我们一直在使用Nutch的local模式,那么Nutch的Deploy模式该怎么使用呢?首先我们来配置hadoop,为使用Nutch的deploy模式做准备。...
分类:
其他好文 时间:
2016-05-22 12:11:53
阅读次数:
196
准备工作 操作系统 CentOS 7 软件环境 关闭防火墙 设置HostName 安装环境 安装JDK 配置java环境变量 验证java 待输出以上内容时说明java已安装配置成功。 安装Hadoop 下载Hadoop 2.6.4 安装Hadoop 2.6.4 配置Hadoop环境变量 验证Had ...
分类:
其他好文 时间:
2016-05-21 10:12:05
阅读次数:
218
Hadoop
0.hbase-env.sh
export JAVA_HOME=/software/jdk1.7.0_80
1.core-site.xml
fs.defaultFS
hdfs://master:9000
hadoop.tmp.dir
...
分类:
其他好文 时间:
2016-05-18 18:50:33
阅读次数:
115
前面两章主要讲解了完全分布式的搭建,这章主要讲解服务器单机完成伪分布的搭建,介绍Hadoop配置,启动,以及简单测试。我的机器:阿里云服务器,64位,Java64,Hadoop2.4.1(64)...
分类:
其他好文 时间:
2016-05-12 22:48:12
阅读次数:
221
http://blog.csdn.net/pipisorry/article/details/51350908
Requirements
1. JDK 1.7.x + Hadoop 2.6.x
Hadoop的安装参考[Hadoop:Hadoop单机伪分布式的安装和配置]
2. protocol buffers
root@dc34d732b74d:/# apt-get update
...
分类:
其他好文 时间:
2016-05-12 18:49:03
阅读次数:
216
Hadoop 2.x伪分布式环境搭建步骤: 1、修改hadoop-env.sh、yarn-env.sh、mapred-env.sh 方法:使用notepad++(beifeng用户)代开这三个文件 添加代码:export JAVA_HOME=/opt/modules/jdk1.7.0_67 2、修改 ...
分类:
其他好文 时间:
2016-05-07 23:41:36
阅读次数:
175
本教程配置环境:
docker (virtual box / virtual machine都ok!)
ubuntu14.04(Ubuntu 12.04 /32位、64位都ok!)
hadoop 2.6.0 (原生 Hadoop 2都ok!)
皮皮blog
Docker安装和配置
# apt-get update
# apt-get install docker.io...
分类:
其他好文 时间:
2016-05-07 07:09:48
阅读次数:
156