1、开发配置环境： 开发环境：Win7（64bit）+Eclipse（kepler service release 2） 配置环境：Ubuntu Server 14.04.1 LTS（64-bit only） 辅助工具：WinSCP + Putty Hadoop版本：2.5.0 Hadoop的Eclipse开发插件（...
分类：
系统相关 时间：
2014-09-02 12:42:25
阅读次数：
343
Hadoop安装方案一、概述本文档适用于hadoop安装，采用1主+1从的方案，两台设备，可自由扩展多从节点。包含hadoop+habase+zookeeper，可作为通用hadoop框架安装的参考。二、主机规划主节点（Namenode）：10.11.20.108 hadoop+habase从节点（...
分类：
其他好文 时间：
2014-09-02 11:56:54
阅读次数：
370
---------------------------------------博文作者：迦壹博客名称：Ubuntu14.04用apt安装CDH5.1.2[Apache Hadoop 2.3.0]博客地址：http://idoall.org/home.php?mod=space&uid=1&do=bl...
分类：
其他好文 时间：
2014-09-02 01:35:04
阅读次数：
458
HBase是Google Bigtable的开源实现，它利用Hadoop HDFS作为其文件存储系统，利用Hadoop MapReduce来处理HBase中的海量数据，利用Zookeeper作为协同服务。1. 简介HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtab...
分类：
其他好文 时间：
2014-09-02 01:34:43
阅读次数：
342
hive 中使用lzo 1 启动hive 错误Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/hive/conf/HiveConf at java.lang.Class.forName0(Na....
分类：
其他好文 时间：
2014-09-01 17:27:43
阅读次数：
545
【官方文档】Hadoop分布式文件系统：架构和设计
分类：
其他好文 时间：
2014-09-01 17:19:53
阅读次数：
348
//这个是在原来的基础上修改以后得到的，将其中的分词的依据给换掉了，并且进行词频统计的时候会自动的忽略大小写
packageorg.apache.hadoop.mapred;
importjava.io.IOException;
importjava.util.ArrayList;
importjava.util.Iterator;
importjava.util.List;...
分类：
其他好文 时间：
2014-09-01 10:47:23
阅读次数：
334
CBT Nuggets Hadoop视频教程，已上传到百度网盘，一共20节课程，从概念介绍到安装到周边项目介绍，巨细靡遗。
分类：
其他好文 时间：
2014-09-01 10:39:22
阅读次数：
214
第一篇文章还有要修改的地方，现在我的集群已经扩展到5台（虚拟机）有些配置还要改，这一篇记录一下Hadoop HA 和zookeeper的配置，方便自己以后看。 新的HDFS中的NameNode不再是只有一个了，可以有多个（目前只支持2个）。每一个都有相同的职能。 在HDFS(HA...
分类：
其他好文 时间：
2014-09-01 02:43:42
阅读次数：
521
注意：以下操作基于Hadoop-1.2.1，Eclipse Luna 1、下载插件源码包 https://github.com/winghc/hadoop2x-eclipse-plugin 2、新建eclisep java工程，将压缩包中以下目录的内容复制到project中 hadoop2x-eclipse-p...
分类：
系统相关 时间：
2014-09-01 01:42:32
阅读次数：
1641
