介绍HDFS和HBase是Hadoop中两种主要的存储文件系统，两者适用的场景不同，HDFS适用于大文件存储，HBASE适用于大量小文件存储。本文主要讲解HDFS文件系统中客户端是如何从Hadoop集群中读取和写入数据的，也可以说是block策略。正文一写入数据当没有配置机架信息时，所有的机器ha..
分类：
其他好文 时间：
2015-01-26 19:31:22
阅读次数：
172
我们都知道Hadoop主要用于离线计算，它由两部分构成：HDFS和MapReduce，其中HDFS负责文件的存储，MapReduce负责对数据的计算，在执行MapReduce程序的时候。需要制定输入的文件uri、输出的文件uri。一般情况下这两个地址都是存放在HDFS上的。MapReduce计算过程又分成两个阶段：map阶段和reduce阶段，其中map阶段是负责将输入文件进行划分，划分的结果是一...
分类：
其他好文 时间：
2015-01-26 19:20:09
阅读次数：
179
前篇1.从SOA说起2.什么是WCF3.WCF通信模型4.Endpoint与ABC以及元数据1.SOA (Service Oriented Architecture)Ø 一种组件架构模型Ø 主要特点每个服务具有明确的服务边界。服务独立，低耦合。采用标准的契约定义和通信协议。服务是自解释的。2.WCF...
分类：
其他好文 时间：
2015-01-26 16:40:01
阅读次数：
252
网络上的很多人写的过程都是错的，关键配置反而不写。SecondaryNameNode的启动有两种方式一：在整个hdfs系统启动时，在namenode上执行start-dfs.sh则namenode会依据conf/master文件下的主机，逐个ssh上去，启动相应的程序，目的SecondaryName...
分类：
其他好文 时间：
2015-01-26 06:27:50
阅读次数：
139
package com.bank.service;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.conf.Configured;import org.ap...
分类：
其他好文 时间：
2015-01-26 00:03:24
阅读次数：
331
warning: ignoring file ../libBaiduMobStat.a, missing required architecture i386 in file ../libBaiduMobStat.a (3 slices)可能原因：正如这个错误提示所指出的那样，缺少了i386架构的东...
分类：
其他好文 时间：
2015-01-24 21:15:03
阅读次数：
166
先安装hadoop1.2.1，见http://blog.csdn.net/jediael_lu/article/details/38926477
1、配置hbase-site.xml
hbase.zookeeper.quorum
master,slave1,slave2
hbase.rootdir
hdfs://master:9000/hbase
...
分类：
其他好文 时间：
2015-01-24 17:20:41
阅读次数：
197
Undefined symbols for architecture i386: "_fwrite$UNIX2003", referenced from: _unixErrorHandler in libcocos2dx iOS.a(tif_unix.o) _unixWarni...
分类：
其他好文 时间：
2015-01-23 15:58:19
阅读次数：
109
一、简介HBase是基于列存储、构建在HDFS上的分布式存储系统，其主要功能是存储海量结构化数据。HBase构建在HDFS之上，因此HBase也是通过增加廉价的PC机提高系统运行和存储的能力。HBase中存储的表有如下特点：1、大表：一个表可以有数十亿行，上百万列；2、无模式：每行都有一..
分类：
其他好文 时间：
2015-01-23 11:26:03
阅读次数：
301
marshal（Java对象转化成XML）
import javax.xml.bind.annotation.XmlRootElement;
//指定根元素，其他属性默认为根元素的子元素
@XmlRootElement(name="article")
public class Article{
private String title;
private Stri...
分类：
编程语言 时间：
2015-01-23 09:33:28
阅读次数：
195
