在hadoop1.2.1的安装说明中有说明要预先安装java，我安装了好多版本的java以及好多版本的hadoop，然后发现oracle-java7与hadoop1.2.1是可以匹配的。
一，安装具体步骤如下：
1. 安装java： sudo apt-get install oracle-java7-installer
2. 安装hadoop1.2.1： http://hadoop....
分类：
其他好文 时间：
2014-07-11 00:31:01
阅读次数：
265
刚刚接触了SpringMVC这个框架，因此有必要把它拿过来同hibernate、Spring框架进行集成和开发一个实例，在真正企业从头开发的项目中往往一个稳定的开发环境至关重要，开发一个项目选择什么样的搭建平台也需要有经验才可以，并不是说你会搭建一个开发平台然后公司就会用你搭建的开发平台，一个项目或者一个公司看中的也不是你可以搭出框架，而是在这个框架使用过程中出现的各种问题你可以解决掉。...
分类：
编程语言 时间：
2014-07-10 21:44:40
阅读次数：
231
Spark1.1发布后会支持Spark SQL CLI ， Spark SQL的CLI会要求被连接到一个Hive Thrift Server上，来实现类似hive shell的功能。...
分类：
数据库 时间：
2014-07-10 21:14:38
阅读次数：
737
本文介绍了spark对hadoop sequencefile的读写支持，实现方式以及简单的使用方法。sequencefile和textfile类似，在上下文里有直接提供读取方法，但最终走的还是hadoopFile方法。...
分类：
其他好文 时间：
2014-07-10 17:11:52
阅读次数：
951
听朋友用magento在搭建电商系统，我好奇。遂自己下载了一个包部署了一套。主机采用linux center os6.5，安装程序非常顺利，部署一套大概费时一个小时左右。#################linux环境搭建##################安装apache2,然后启动：yum in...
分类：
Web程序 时间：
2014-07-10 15:55:34
阅读次数：
260
HDFS和Mapreduce是Hadoop的两大核心。整个Hadoop的体系结构主要是通过HDFS来实现分布式存储的底层支持，MapReduce来实现分布式并行任务处理的程序支持。HDFSHDFS采用了主从（Master/Slave）结构模型，一个HDFS集群是由一个NameNode和若干个Data...
分类：
其他好文 时间：
2014-07-10 15:36:19
阅读次数：
204
安装nodejs搭建依赖环境 首先安装g++编译器与git，在终端输入如下命令 sudo apt-get install g++ curl libssl-dev apache2-utils sudo apt-get install git-core git如果已经安装则不需...
分类：
Web程序 时间：
2014-07-10 15:35:38
阅读次数：
318
以下图1是hadoop生态图，通俗的说，就是hadoop核心模块和衍生的子项目。 图 1 Hadoop生态系统图由图可知，hadoop生态系统包括以下成员：① 各种浏览器，产生海量的Web数据；② Nutch项目，一个快速搜索海量网页的开源项目③ HDFS，Hadoop分布式文件系统，大数据的存储系...
分类：
其他好文 时间：
2014-07-10 15:32:23
阅读次数：
189
MapReduce任务执行总流程以下图5 是MapReduce作业详细的执行流程图。 图 5 MapReduce 作业执行流程图1.在客户端（Client）编写MapReduce代码，配置作业，启动作业。这里需要注意的一点是：一个MapReduce作业在提交到Hadoop上之后，会进入完全地自动化执...
分类：
其他好文 时间：
2014-07-10 15:02:50
阅读次数：
307
现在 Hadoop 已经发展成为包含多个子项目的集合。虽然其核心内容是 MapReduce 和Hadoop 分布式文件系统（HDFS），但 Hadoop 下的Common 、Avro、 Chukwa、Hive 、HBase等子项目也是不可或缺的。它们提供了互补性服务或在核心层上提供了更高层的服务。以...
分类：
其他好文 时间：
2014-07-10 14:57:00
阅读次数：
333
