有同学希望调用Scan.setMaxResultSize(long)这个方法来设置scan扫描后返回的条数,目前我的理解,这个属性能到一定的限制作用,但是很多时候不会向你想的那样其作用,下面我来进行一些说明。 如果你看过HRegionSe...
分类:
其他好文 时间:
2015-02-05 15:15:14
阅读次数:
5645
1. 两者分别是什么? Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言,这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能,但是Hive不能够进行交互查询--因为它只能...
分类:
其他好文 时间:
2015-02-04 23:15:56
阅读次数:
433
1.概要1.1HBase的使用场景? 大数据量 (100s TB级数据) 且有快速随机访问的需求。? 例如淘宝的交易历史记录。数据量巨大无容置疑,面向普通用户的请求必然要即时响应。? 容量的优雅扩展。? 大数据的驱使,动态扩展系统容量的必须的。例如:webPage DB。? 业务场景简单,不需要关系...
分类:
其他好文 时间:
2015-02-04 16:25:30
阅读次数:
215
1. downloadhttp://124.202.164.13/files/1244000005C563FC/www.eu.apache.org/dist/hbase/stable/hbase-0.98.9-hadoop2-bin.tar.gz2. copy to /opt3. cp /opt ....
分类:
其他好文 时间:
2015-02-03 00:29:26
阅读次数:
450
package test;import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.Cell;import org.apache.hadoop.hba...
分类:
编程语言 时间:
2015-02-02 22:57:23
阅读次数:
286
图1java操作hbase,连接数据库方式如图1然后问题来了!!!!!!!!!!!!从开始连接数据库到连接完毕(HTableh=newHTable(config,tablename))竟然用了20秒。。。发生了什么????图2图3再看看之后getscanner。用了9秒,经过几次测试发现不管是取10条还是10000条还是100..
分类:
其他好文 时间:
2015-02-02 20:05:38
阅读次数:
134
一、应用线程导入1、创建put方法publicclassmmm{
publicstaticConfigurationconfig=newConfiguration();;
static{
config.set("hbase.zookeeper.property.clientPoint","2181");
config.set("hbase.zookeeper.quorum","hbase");
config.set("dfs.socket.timeout","1800..
分类:
其他好文 时间:
2015-01-31 19:32:37
阅读次数:
398
2、DedicatedFilters 2.1SingleColumnValueFilter √ 2.2SingleColumnValueExcludeFilter √ 2.3PrefixFilter √ 2.4PageFilter √ 2.5KeyOnlyFilter √ 2.6FirstKeyOnlyFilter √ 2.7TimestampsFilter × 2.8RandomRowFilter √ 2.1SingleColumnValueFi..
分类:
其他好文 时间:
2015-01-31 19:30:19
阅读次数:
216
在安装hbase中出现问题如下:ERROR: Can't get master address from ZooKeeper; znode data == null解决办法:1、删除namenode目录中/data/hadoop/tmp/dfs/namesecondary/current的文件2、为...
分类:
其他好文 时间:
2015-01-31 00:18:13
阅读次数:
119