hbaseregion,store,storefile和列簇，的关系关于hbase的read操作的深入研究region到storefile过程
分类：
其他好文 时间：
2014-07-23 21:25:57
阅读次数：
169
hive是什么？ 白话一点再加不严格一点，hive可以认为是map-reduce的一个包装。hive的意义就是把好写的hive的sql转换为复杂难写的map-reduce程序。 于是，hbase是什么？ 同样白话一点加不严格一点，hbase可以认为是...
分类：
其他好文 时间：
2014-07-23 13:57:36
阅读次数：
268
说明：
最近两天在调研HBase的连接池，有了一些收获，特此记录下来。
本文先将官方文档（http://hbase.apache.org/book.html）9.3.1.1节翻译，方便大家阅读，然后查阅了关键类HConnectionManager的Developer API（http://hbase.apache.org/devapidocs/index.html） 做了一些总结。...
分类：
其他好文 时间：
2014-07-23 00:12:08
阅读次数：
466
对于刚接触大数据的用户来说，要想区分Hive与HBase是有一定难度的。本文将尝试从其各自的定义、特点、限制、应用场景等角度来进行分析，以作抛砖引玉之用。Hive是什么？Apache Hive是一个构建于Hadoop(分布式系统基础架构)顶层的数据仓库，注意这里不是数据库。Hive可以看作是用户编程...
分类：
其他好文 时间：
2014-07-22 22:45:54
阅读次数：
257
本次主要是采用hbase自带的importtsv工具来导入。首先要把数据文件上传到hdfs上，然后导入hbase表格。该导入方式只支持.tsv数据文件的导入。导入流程：1.下载数据。我们在本文中将使用 “美国国家海洋和大气管理局 气候平均值”的公共数据集合。访问http://www1.ncdc.no...
分类：
其他好文 时间：
2014-07-22 22:36:13
阅读次数：
406
我用的是cdh4.5版本：配置文件：$HBASE_HOME/conf/hbase-env.shexport JAVA_HOME=$JAVA_HOMEexport JAVA_HOME=/home/hadoop/jdk1.7.0_51export HBASE_CLASSPATH=$HBASE_HOME/...
分类：
其他好文 时间：
2014-07-22 22:35:55
阅读次数：
204
Go语言没有异常处理机制，大部分情况下只能用panic和recover。在这种机制下，函数体中的被调函数中出现的错误是无法处理的，只能静候崩溃。 今天我发现thrift在生成的RPC代码有空指针BUG导致程序崩溃，这个有BUG...
分类：
其他好文 时间：
2014-07-22 09:00:04
阅读次数：
191
Hbase特征：
最近在学习Hbase，Hbase基于行健是建立了索引的，查询速度会非常快，完全实时。
但是Hbase要基于行健之外的字段进行查询，那么就只能是全盘扫描，基本上不可接受。
所以Hbase一般来说会针对具体的应用场景来设计行健，利用基于行健的查询的实时性来达到Hbase数据的实时查询。
关系型数据库基于索引字段的实时查询：
然后联想到关系型SQL数据库，他们针对主键是...
分类：
数据库 时间：
2014-07-22 00:07:33
阅读次数：
282
HBase是面向列的分布式的数据库，和传统的关系型数据库有很大的不同：物理模型和逻辑模型。这里我们要首先讲一下HBase数据库相关的区别于关系型数据库的几个基本概念： 表：HBase将数据组织到自己的HTable表中，这个表是根据列族(colomn family)在物理上保存数据的，每个列族都有自己...
分类：
其他好文 时间：
2014-07-21 14:22:20
阅读次数：
1257
前两天想在微博上发表一个观点：在现在的技术体系中，能用于描述通讯协议的方式很多，xml,json,protobuf，thrift，如果在有如此众多选择的基础上，在设计系统时，还自造协议，自己设计协议类型和解析方式，...
分类：
其他好文 时间：
2014-07-21 10:24:14
阅读次数：
182
