一、Eclipse hadoop环境配置1. 在我的电脑右键->属性->高级系统设置->环境变量，配置环境变量： JAVA_HOME=D:\ProgramFiles\Java\jdk1.7.0_67， HADOOP_HOME=D:\TEDP_Software\hadoop-2.4.0, ...
分类：
系统相关 时间：
2015-04-07 13:29:08
阅读次数：
424
hadoop2.5.2学习及实践笔记（五）—— HDFS shell命令行常见操作
分类：
系统相关 时间：
2015-04-04 01:11:28
阅读次数：
260
修改主机名和IP的映射关系 vim /etc/hosts 192.168.1.168????????cacgg168 ? 安装java export JAVA_HOME=/usr/java/jdk1.6.0_45? export JRE_HOME=/usr/java/jdk1.6.0_45/jre? export CLASSPATH=.:$JA...
分类：
其他好文 时间：
2015-04-03 22:35:36
阅读次数：
139
#hadoop version 查看版本号1 、获取默认配置hadoop2系列配置文件一共包括6个，分别是hadoop-env.sh、core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml和slaves。除了hdfs-site.xml文件在...
分类：
其他好文 时间：
2015-03-31 17:28:40
阅读次数：
145
对namenode启动时的相关操作及相关类有一个大体了解，后续深入研究时，再对本文进行补充>实现类HDFS启动脚本为$HADOOP_HOME/sbin/start-dfs.sh，查看start-dfs.sh可以看出，namenode是通过bin/hdfs命令来启动$ vi start-dfs.sh....
分类：
其他好文 时间：
2015-03-31 00:38:19
阅读次数：
238
Hadoop版本：2.6.0 虚拟机VMware11 操作系统ubuntu14.04-x64相关的教程可见http://blog.csdn.net/ggz631047367/article/details/42426391此处仅分享在配置过程中遇到的问题。问题1. 针对使用sudo su的问题 在....
分类：
其他好文 时间：
2015-03-30 21:04:37
阅读次数：
128
Hadoop 1.0内核主要由两个分支组成：MapReduce和HDFS，众所周知，这两个系统的设计缺陷是单点故障，即MR的JobTracker和HDFS的NameNode两个核心服务均存在单点问题，该问题在很长时间内没有解决，这使得Hadoop在相当长时间内仅适合离线存储和离线计算。 令人欣...
分类：
其他好文 时间：
2015-03-30 18:08:59
阅读次数：
145
centos单机安装Hadoop2.6 分类： JAVA 2015-03-02 23:18 223人阅读 评论(0) 收藏 举报 集群安装：http://blog.csdn.net/linghe301/article/details/9184453Hadoop2.6单机安装一，安装环境硬件：虚...
分类：
其他好文 时间：
2015-03-30 16:07:28
阅读次数：
141
export SPARK_LIBRARY_PATH=$SPARK_LIBRARY_PATH:/soft/hadoop/lzo/lib/export SPARK_CLASSPATH=$SPARK_CLASSPATH:/soft/server/spark-1.0.2-bin-hadoop2/lib/ha...
分类：
其他好文 时间：
2015-03-30 10:47:38
阅读次数：
201
今天总算是把hadoop2.4的整个开发环境弄好了，包括 windows7上eclipse连接hadoop，eclipse的配置和測试弄得烦躁的一逗比了~先上一张成功的图片，hadoop的伪分布式安装配置，仅仅要依照步骤来，有点基础的 基本没什么问题的。。eclipse的配置 弄了非常长一段时间才弄...
分类：
其他好文 时间：
2015-03-29 19:17:35
阅读次数：
103
