转自:http://www.cnblogs.com/chenz/articles/3229997.html背景:某电信项目中采用HBase来存储用户终端明细数据,供前台页面即时查询。HBase无可置疑拥有其优势,但其本身只对rowkey支持毫秒级的快速检索,对于多字段的组合查询却无能为力。针对HBa...
分类:
其他好文 时间:
2015-12-02 16:16:26
阅读次数:
207
1.hbase的rowkey是按字典排序的,我看有的资料建议rowkey设计不应该是自增的,应该和这个字典排序相关吧 2.hbase的数据存储是按照region来的,region的设计前段时间在坐飞机时候看了下,看来映像不是太深,有点记忆不清了,不过今天发现,region是请求访问的一个具体源头,....
分类:
其他好文 时间:
2015-11-30 23:54:17
阅读次数:
129
1.Hbase 根据rowkey 查询 conf的配置信息如下: conf = new Configuration(); conf.set("hbase.zookeeper.quorum", "192.168.50.253:2181"); conf.set("hbase.rootdir", "hdf...
分类:
其他好文 时间:
2015-11-29 13:31:05
阅读次数:
241
你的快速是指什么?是根据亿级的记录中快速查询,还是说以实时的方式查询数据。A:如果快速查询(从磁盘读数据),hbase是根据rowkey查询的,只要能快速的定位rowkey,就能实现快速的查询,主要是以下因素:1、hbase是可划分成多个region,你可以简单的理解为关系型数据库的多个分区。2、键...
分类:
其他好文 时间:
2015-11-24 12:44:17
阅读次数:
144
转载自http://blog.csdn.net/ryantotti/article/details/13295325在二级索引的实现技术上一般有几个方案:1. 表索引使用单独的hbase表存储索引数据,业务表的索引列值做为索引表的rowkey,业务表的rowkey做为索引表的qualifier或va...
分类:
其他好文 时间:
2015-11-24 12:40:44
阅读次数:
144
1.HBase基础 1.1.HBase基本介绍 1.2.HBase配置安装 1.3.HBase使用用例 1.3.1.增 1.3.2.删 1.3.3.改 1.3.4.查 1.4.HBase基本概念 1.4.1.表,rowkey,列蔟,列 1.4.2.数据版本TTL 1.4.3.root,...
分类:
其他好文 时间:
2015-11-05 18:35:23
阅读次数:
1494
行键设计高表与宽表高表:表中列少行多宽表:表中列多行少Hbase只能按行分片,因此高表更有优势。把需要检索的条件尽量放到行键rowkey里面去宽表适合需要行级原子性的需求辅助索引由客户端管理索引:缺点比优点更多带索引的事务型Hbase: ITHbase (个人认为要远离在原本就不成熟的HBase上的更不成熟的封装)带索引的Hbase: IHbase (个人认为要远离在原本就不成熟的HBase上的...
分类:
其他好文 时间:
2015-10-28 19:27:57
阅读次数:
201
1.4 HBase结构1.4.2 HBase 的表、列和单元格基本单位是column多column组成row一个row有唯一rowkey每个column有多个版本,多个版本存储在单元格(cell)中行序是按照字典顺序进行排序的,意思是从左到右一次对比每一个键关于排序:排列顺序如果跟预期的不一样,需要补键,比如 row-1 永远小于 row-2,无论后面是什么,将始终按照这个顺序排列思考这有可能影...
分类:
其他好文 时间:
2015-10-14 21:49:02
阅读次数:
214
HBase的表结构HBase以表的形式存储数据。表有行和列组成。列划分为若干个列族/列簇(columnfamily)。如上图所示,key1,key2,key3是三条记录的唯一的rowkey值,column-family1,column-family2,column-family3是三个列族,每个列族下又包括几列。比如column-family1这个列族下包括..
分类:
其他好文 时间:
2015-09-17 17:43:34
阅读次数:
157
数据模型特殊属性 Rowkey、Column(列族和列)、Version 组合在一起称为 HBase 中的一个单元格。有可能会有很多单元格的 行和列 是相同的,要区分不同的单元格可以使用版本。 如果有多个版本的写操作同时发起,HBase 都会保存 可以发起包含版本的写操作Delete 内部删除标记三...
分类:
其他好文 时间:
2015-08-27 13:11:11
阅读次数:
188