在用Hadoop框架处理大数据时使用最多就是HDFS--分布式文件系统，但Hadoop的文件系统不仅只有分布式文件系统，例如：hfs,HSFTP,HAR等在Hadoop中都是有集成的，用来处理存储在不同体系中的数据。事实上应该这么说，Hadoop其实是一个综合性的文件系统。 下面来看看文件系统...
分类：
其他好文 时间：
2014-08-05 03:01:09
阅读次数：
291
这几天在做项目的时候用到了maven，但是自己没有从来没有接触过，所以咋网上找资料，终于找到了一下的资料，这个是别人总结的，我只是转载过来积累。请尊重原创。官网地址：http://maven.apache.org/下载地址：http://download.csdn.net/detail/joling...
分类：
其他好文 时间：
2014-08-05 02:56:38
阅读次数：
253
原本的工作环境是在Linux下,环境很好弄,现在需要假设到windows上也搞一个opencv的服务,为方便调试,特意配置了下环境,记录如下:1.1 环境准备安装 Visual Studio 2012下载 opencv 2.4.6 (http://opencv.org/downloads.html)...
分类：
其他好文 时间：
2014-08-05 02:55:58
阅读次数：
282
MapReduce源码分析之MapTask详解的后半段文章。在分析过程中我们知道了MapTask是如何使用循环缓存区管理数据，知道了数据在缓存不下是如何做spill处理的，spill输出的数据格式，combiner如何处理，如何将多一个文件merge为一个等等。也希望通过阅读这部分源码能学习到部分设计思路，能在未来的设计中提供多一种思路。...
分类：
其他好文 时间：
2014-08-05 00:47:18
阅读次数：
484
1.下载JDK，http://www.oracle.com/technetwork/java/javase/downloads/index.html，选择版本
2.安装刚刚下载的JDK
3.环境变量配置，
新建JAVA_HOME系统变量：C:\Program Files\Java\jdk1.7.0_65（JDK安装目录）
新建CLASS_PATH系统变量： .;%J...
分类：
移动开发 时间：
2014-08-05 00:42:09
阅读次数：
971
今天做的就是将fpg跑出来的结果进行各种指标计算，但是因为用python还是不是特别熟悉，因为没有找到python能处理类似SequenceFile这样的类库，所以就用java编写，这下就是折腾各种包引用，就是classpath的引用。由于涉及到hadoop和mahout的包，这样需要添加到cl.....
分类：
其他好文 时间：
2014-08-05 00:30:28
阅读次数：
239
初次接触Cocos2d-x，准备搭建一个hello world的Android环境，问题遇到很多。在此记录，为自己，也为大家，避免重走弯路！具体的环境搭建，可以参考官方的文档。在Windows7平台搭建Cocos2d-x Android开发环境。1.Android-ndk-r10不能放在具有空格.....
分类：
移动开发 时间：
2014-08-05 00:19:58
阅读次数：
2409
翻译自cloudera，原文直通车：Apache HBase Write Path Apache HBase也就是Hadoop Database是基于HDFS之上的.HBase可以随机获取和更新存储在HDFS上的记录。但是HDFS 上的文件只能追加而且一旦创建便无法修改。说到这里你或许会问：那HBa...
分类：
其他好文 时间：
2014-08-04 21:20:57
阅读次数：
264
首先所有的输入格式都继承FileInputFormat，对于TextFile和SequenceFile有对应的TextInputFormat和SequenceFileInputFormat。我们先来看一下TextInputFormat的实现：publicclassTextInputFormatextendsFileInputFormat<LongWritable,Text>
implementsJobConfigurable{
p..
分类：
其他好文 时间：
2014-08-04 18:17:29
阅读次数：
677
