Hadoop平台搭建有三种模式，分别是单机模式、伪分布模式、完全分布模式。单机模式是在单一计算机或者服务器上运行Hadoop，没有分布式的文件上传和任务分配等功能。它执行的流程仍然是Map/Reduce，但是是文件和程序都在本机上，可以看成只有一个节点的Hadoop平台。伪分布模式也是单一计算机.....
分类：
系统相关 时间：
2015-07-08 12:25:53
阅读次数：
173
Hadoop是用作处理大数据用的，核心是HDFS、Map/Reduce。虽然目前工作中不需要使用这个，但是，技多不压身，经过虚拟机很多遍的尝试，终于将Hadoop2.5.2的环境顺利搭建起来了。 ? ? ? ?首先准备一...
分类：
其他好文 时间：
2015-07-07 17:17:53
阅读次数：
114
1.准备Linux环境 1.0点击VMware快捷方式，右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段：192.168.8.0 子网掩码：255.255.255.0 -> apply -> ok 回到windo....
分类：
其他好文 时间：
2015-07-02 15:37:03
阅读次数：
160
伪分布式hadoop的三种安装方式：Local (Standalone) ModePseudo-Distributed ModeFully-Distributed Mode安装之前需要$ sudo apt-get install ssh $ sudo apt-get install rsync详见....
分类：
其他好文 时间：
2015-06-28 22:54:22
阅读次数：
335
版本：虚拟机下安装的ubuntu14.04（x64）,hadoop-2.6.0下面是hadoop2.6.0的官方教程（英文）：http://hadoop.apache.org/docs/r2.6.0/hadoop-project-dist/hadoop-common/SingleCluster.ht...
分类：
系统相关 时间：
2015-06-26 01:43:56
阅读次数：
498
Hadoop在处理海量数据分析方面具有独天优势。今天花时间在自己的Linux上搭建了伪分布模式，期间经历很多曲折，现在将经验总结如下。 首先，了解Hadoop的三种安装模式： 1. 单机模式. 单机模式是Hadoop的默认模。当...
分类：
系统相关 时间：
2015-06-24 19:27:47
阅读次数：
231
第一步：安装jdk 我的linux版本是centos7，使用最简单的安装方式，这里首先说一下，由于系统会预装openjdk版本等其他各种版本，首先要做的是清除这些版本，然后iu安装oracle的jdk版本 1.1 查看所有jdk版本并删除其...
分类：
其他好文 时间：
2015-06-23 13:53:00
阅读次数：
141
先写的这一篇，很多东西没再重复写。一.所需软件 jdk和ubuntu都是32位的。二.安装JDK 1.建jdk文件夹cd usrsudo mkdir javajdk 2.移动mv或者复制cp安装包//进入桌面cd home/hxsyl/DeskTopsudo mv /usr/javajdk...
分类：
其他好文 时间：
2015-06-17 00:21:52
阅读次数：
164
【如果觉得我的笔记写的好，您可以小额赞助我：支付宝 15202166392】本文环境：OS:CentOS 6.6JDK:1.7.0_79Hadoop:1.0.4User:xavier一、伪分布式Hadoop配置[备注]Hadoop位于：/home/xavier/下Hadoop目录下建立：tmp,df...
分类：
其他好文 时间：
2015-06-16 22:28:25
阅读次数：
131
