本文是在AzureTablestorage基本用法一文的基础上，介绍如何自定义AzureTablestorage的查询过滤条件。如果您还不太清楚AzureTablestorage的基本用法，请先移步前文。文章来源：葡萄城产品技术社区让我们回到前文中提到的一个问题，如何过滤出MyLogTable表中某一天产生的所有日志..
分类：
其他好文 时间：
2016-08-02 17:24:57
阅读次数：
179
需求：绘制渠道用户的每日趋势（每分钟一组数据一天1440组，2000+个渠道，区分新/老用户，2*1440*2000+=576万+/每天），需要保存90天。 查询条件：渠道号、新or老用户、日期 rowkey：渠道_日期_新or老用户_小时分钟（hhmm） 连接HBase 创建表： 插入数据： ...
分类：
其他好文 时间：
2016-07-11 16:42:56
阅读次数：
235
本章将深入介绍由HBase的存储架构在设计上带来的影响。如何设计表、row key、column等等，尽可能地使用到HBase存储上的优势。 Key设计 HBase有两个基础的主键结构：row key和column key。它们分别用来表征存储的数据和数据的排序顺序。以下的几节将讨论如何通过key设 ...
分类：
其他好文 时间：
2016-07-01 10:21:09
阅读次数：
311
HBase是三维有序存储的，通过rowkey（行键），column key（column family和qualifier）和TimeStamp（时间戳）这个三个维度可以对HBase中的数据进行快速定位。 HBase中rowkey可以唯一标识一行记录，在HBase查询的时候，有两种方式： rowke ...
分类：
其他好文 时间：
2016-06-17 19:01:20
阅读次数：
137
读取HDFS上文件数据 HBase 随机生成rowkey 前置处理 HBase Util工具类，用put方式批量或者单条数据入库 ...
分类：
其他好文 时间：
2016-06-14 15:40:08
阅读次数：
155
摘要 最近做的一个项目涉及到了多条件的组合查询，数据存储用的是HBase，恰恰HBase对于这种场景的查询特别不给力，一般HBase的查询都是通过RowKey(要把多条件组合查询的字段都拼接在RowKey中显然不太可能)，或者全表扫描再结合过滤器筛选出目标数据(太低效)，所以通过设计HBase的二级 ...
分类：
其他好文 时间：
2016-06-13 01:00:07
阅读次数：
153
背景： 某电信项目中采用HBase来存储用户终端明细数据，供前台页面即时查询。HBase无可置疑拥有其优势，但其本身只对rowkey支持毫秒级 的快 速检索，对于多字段的组合查询却无能为力。针对HBase的多条件查询也有多种方案，但是这些方案要么太复杂，要么效率太低，本文只对基于Solr的 HBas ...
分类：
其他好文 时间：
2016-06-06 21:57:38
阅读次数：
161
转自：http://www.cnblogs.com/bdifn/p/3801737.html 问题导读：1.如何防止热点？2.如何预分区？扩展：为什么会产生热点存储？ HBase中，表会被划分为1...n个Region，被托管在RegionServer中。Region二个重要的属性:StartKey ...
分类：
其他好文 时间：
2016-05-23 21:22:01
阅读次数：
384
Phoenix Salted Table是phoenix为了防止hbase表rowkey设计为自增序列而引发热点region读和热点region写而采取的一种表设计手段。通过在创建表的时候指定SALT_BUCKETS来实现pre-split。...
分类：
其他好文 时间：
2016-05-12 23:10:14
阅读次数：
123
