码迷,mamicode.com
首页 >  
搜索关键字:htable    ( 257个结果
HBase写性能初步测试
在本机上对线下HBase集群做了初步的写性能测试,下面对测试内容做详细说明。 批量写性能提升不少 线上应用最好是禁用buffer刷写功能的,即每一个Put一次RPC写,不过看到这种情况下写速度慢,考虑到机器、网络环境的差别的话,估计能上1K 启用buffer刷写功能的话,要避免未flush的put记录丢失。(HTable在close的时候最后是会自动flush,我们在写服务节点故障的时候也需要flush一次) Rowkey哈希后性能有小量提升 Rowkey Hash之后对写性能的确有小量提升,但如果要...
分类:其他好文   时间:2014-06-19 10:16:00    阅读次数:296
HBase概念学习(三)Java API之扫描和过滤器
HBase基本的CRUD操作就不多介绍了,无非就是Put,Get,Delete三个类的运用。 现在看一下扫描技术,这种技术类似于关系型数据库的游标(cursor),并利用到了HBase底层顺序存储的特性。 使用扫描的一般步骤是: 1、创建Scan实例 2、为Scan实例增加扫描的限制条件 3、调用HTable的getScanner()方法获取ResultScanner对象 4、迭代Resul...
分类:编程语言   时间:2014-06-17 23:15:54    阅读次数:388
HBase Java API使用
概括1. 创建、删除及启用禁用表、添加列等都需用到HBaseAdmin,另外需要注意删除,添加列等操作都需要禁用表2. 表中添加数据,查询等都是和HTable相关,如果是多线程的情况下注意用HTablePool3. 插入数据使用Put,可以单行添加也可批量添加4. 查询数据需使用Get,Result...
分类:编程语言   时间:2014-05-28 02:19:21    阅读次数:327
map insert segment abort fault
_hashMap.insert(pair<String,HASH_TABLE*>(tmp,hashtabletmp));这句会报segment或abort错误经同事帮看,也翻来覆去自查,终于发现原来是malloc中hTable->hList=(pHASH_ENTRY)malloc(hTable->listLen*(HASH_ENTRY_SIZE));这句写成了hTable->hList=(pHASH_ENTRY)..
分类:其他好文   时间:2014-05-20 20:20:34    阅读次数:288
hbase源码系列(十一)Put、Delete在服务端是如何处理?
在讲完之后HFile和HLog之后,今天我想分享是Put在Region Server经历些了什么?相信前面看了《HTable探秘》的朋友都会有印象,没看过的建议回去先看看,Put是通过MultiServerCallable来提交的多个Put,好,我们就先去这个类吧,在call方法里面,我们找到了这句...
分类:其他好文   时间:2014-05-17 22:54:25    阅读次数:397
hbase0.96 put流程 源代码分析
无意间多瞄了一眼hbase0.98的代码,想复习下put流程,发现htable里面已经找不到processBatchOfPuts()奇怪了。看了半天原来变化还真大其实0.96就没这个了,于是又搞了个0.96的代码看看 之前有篇可以对比差异,请转移至:http://blog.csdn.net/luyee2010/article/details/8435739 不过排版太乱将就看吧! HTab...
分类:其他好文   时间:2014-05-15 04:36:10    阅读次数:306
hbase源码系列(二)HTable 如何访问客户端
hbase的源码终于搞一个段落了,在接下来的一个月,着重于把看过的源码提炼一下,对一些有意思的主题进行分享一下。继上一篇讲了负载均衡之后,这一篇我们从client开始讲吧,从client到master再到region server,按照这个顺序来开展,网友也可以对自己感兴趣的部分给我留言或者直接.....
分类:其他好文   时间:2014-04-27 17:34:53    阅读次数:790
257条   上一页 1 ... 24 25 26
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!