码迷,mamicode.com
首页 >  
搜索关键字:hadoop 环境搭建    ( 22808个结果
Hadoop2.2.0安装过程记录
1 安装环境1.1 客户端1.2 服务端1.3 安装准备 2 操作系统安装2.1.1 BIOS打开虚拟化支持2.1.2 关闭防火墙2.1.3 安装VNC3 JAVA安装 3.1 配置目的3.2 配置过程3.3 结果验证4 主机名配置4.1 配置目的4.2 配置过程4.3 结果验证5 增加hadoop...
分类:其他好文   时间:2014-08-17 06:02:33    阅读次数:969
hadoop的工作原理
hadoop是一种分布式系统的平台,通过它可以很轻松的搭建一个高效、高质量的分布系统,而且它还有许多其它的相关子项目,也就是对它的功能的极大扩充,包括Zookeeper,Hive,Hbase等。MapReduce是hadoop的核心组件之一,hadoop要分布式包括两部分,一是分布式文件系统hdfs,一部是..
分类:其他好文   时间:2014-08-17 01:11:02    阅读次数:241
安卓开发环境搭建
1,网上有多篇类似文章,才用JDK+Eclipse+Andriod SDK+ADT组合完成,JDK和Eclipse是用于支持java开发环境用的,Andriod SDK和ADT才是针对安卓开发的由于目前google很难访问,所以多篇文章中采用的在线安装SDK和ADT方式不太可取,推荐采用下载安装的方...
分类:移动开发   时间:2014-08-17 00:58:31    阅读次数:310
MapReduce剖析笔记之一:从WordCount理解MapReduce的几个阶段
WordCount是一个入门的MapReduce程序(从src\examples\org\apache\hadoop\examples粘贴过来的):package org.apache.hadoop.examples;import java.io.IOException;import java.ut...
分类:其他好文   时间:2014-08-16 23:48:21    阅读次数:340
去除hadoop启动过程中的警告信息
安装完hadoop后启动hadoop会报一个Warning。解决办法vi /etc/profile进入编辑模式,添加下面这行export HADOOP_HOME_WARN_SUPPRESS=1保存退出立即生效:source /etc/profile重新启动hadoop消除警告成功!
分类:其他好文   时间:2014-08-16 23:46:21    阅读次数:275
从Hadoop框架与MapReduce模式中谈海量数据处理(含淘宝技术架构)
从hadoop框架与MapReduce模式中谈海量数据处理前言 几周前,当我最初听到,以致后来初次接触Hadoop与MapReduce这两个东西,我便稍显兴奋,认为它们非常是神奇,而神奇的东西常能勾起我的兴趣,在看过介绍它们的文章或论文之后,认为Hadoop是一项富有趣味和挑战性的技术,且它还牵扯到...
分类:其他好文   时间:2014-08-16 18:29:30    阅读次数:339
hadoop高可靠
HDFS可靠性冗余副本策略机架策略心跳机制安全模式校验和回收站元数据保护在数据节点启动后,会把本地的文件系统遍历一次,产生一份数据块以及本地文件对应关系的清单叫做块报告,会汇报给NameNodeHadoop机架感知集群中各个节点之间会相互传递信息包心跳机制nameNode周期性从dat..
分类:其他好文   时间:2014-08-16 17:15:21    阅读次数:317
Android Studio安装及环境搭建
第一步:下载Android Studio:android-studio-bundle-135.1245622-windows 第二步:安装Android Studio 第三步:下载JDK:jdk-8u11-windows-x64 第四步:安装JDK,注意在安装JDK时会安装JRE,此时我们要将他们分开在不同文件夹,否则在运行Android Studio会报错: 第五步:设置环境变量...
分类:移动开发   时间:2014-08-16 16:30:00    阅读次数:280
Spring 开发环境搭建
为了方面,直接使用eclipse,创建maven工程,创建成功之后一、修改pom.xml,为了方面我就把Spring相关的jar包都引用了 4.0.0 com.qunar studyspring 0.0.1-SNAPSHOT jar studyspring ...
分类:编程语言   时间:2014-08-16 16:24:50    阅读次数:220
Hadoop2.4.1完全分布式安装
在虚拟机利用两台centos(64位),由于使用的机器是64位,所以要自己编译好安装包1、建Hadoop运行组和用户root下运行命令,创建组和用户groupadd hadoopuseradd -g hadoop hadooppasswd hadoop2、修改/etc/hosts192.168.13...
分类:其他好文   时间:2014-08-16 12:21:20    阅读次数:263
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!