Hadoop1、是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。2、Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有高容错 ...
分类：
其他好文 时间：
2017-04-26 19:18:24
阅读次数：
161
Hadoop版本Hadoop有两个主要版本，Hadoop1.x.y和Hadoop2.x.y系列.1.x.y大数公司已经更新Hadoop2.x版本，本教程均可适用.基本环境:Centos6.5jdk1.7.0_67hadoop2.5.1一、配置jdk1)下载jdk版本本教程试用jdk-7u67-linux-x64.war.gz2)创建解压目录mkdir/usr/local/java3)移动jdk到/..
分类：
其他好文 时间：
2017-04-18 20:10:31
阅读次数：
188
用eclipse连接集群查看文件信息提示9000port拒绝连接的错误 Cannot connect to the Map/Reduce location: hadoop1.0.3 Call to ubuntu/192.168.1.111:9000 failed on connection exce ...
分类：
系统相关 时间：
2017-04-17 16:14:28
阅读次数：
427
当我动态加入一个hadoop从节点的之后，出现了一个问题： [root@hadoop current]# hadoop-daemon.sh start datanode starting datanode, logging to /usr/local/hadoop1.1/libexec/../log ...
分类：
其他好文 时间：
2017-04-14 14:52:45
阅读次数：
261
Hive主要分为以下几个部分 ?户接口1.包括CLI，JDBC/ODBC，WebUI元数据存储（metastore）1.默认存储在?带的数据库derby中，线上使?时?般换为MySQL驱动器（Driver）1.解释器、编译器、优化器、执?器Hadoop1.?MapReduce 进?计算，?HDFS ...
分类：
其他好文 时间：
2017-04-09 11:52:33
阅读次数：
380
拷贝hadoop1.2.1.tar.gz安装包到其他的节点上scp -r ~/hadoop-1.2.1.tar.gz root@node2:~/ tar -zxvf hadoop-1.2.1.tar.gz 解压tar包ln -sf /root/hadoop-1.2.1 /home/hadoop-1.... ...
分类：
其他好文 时间：
2017-04-04 17:21:48
阅读次数：
250
1.HADOOP背景介绍1.1什么是HADOOP1.HADOOP是apache旗下的一套开源软件平台2.HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理3.HADOOP的核心组件有A.HDFS（分布式文件系统）B.YARN（运算资源调度系统）C.MAPREDUCE（分布式运算编程框架..
分类：
其他好文 时间：
2017-03-27 12:05:23
阅读次数：
405
一：Haddop版本介绍 0.20.x版本最后演化成了现在的1.0.x版本 0.23.x版本最后演化成了现在的2.x版本 hadoop 1.0 指的是1.x(0.20.x),0.21,0.22 hadoop 2.0 指的是2.x,0.23.x CDH3,CDH4分别对应了hadoop1.0 hado ...
分类：
其他好文 时间：
2017-03-19 23:45:56
阅读次数：
271
项目构建Hadoop1.0内核主要由两个分支组成：MapReduce和HDFS，众所周知，这两个系统的设计缺陷是单点故障，即MR的JobTracker和HDFS的NameNode两个核心服务均存在单点问题，该问题在很长时间内没有解决，这使得Hadoop在相当长时间内仅适合离线存储和离线计算。令人欣慰的是，这..
分类：
其他好文 时间：
2017-03-15 19:14:53
阅读次数：
197
