HBase配置相对比较简单，下面的教程也是基于我上面2篇Hadoop配置的环境下继续往下添加HBase的分布式配置，这次我的HBase安装目录放在跟Hadoop同一目录下面，节点信息跟我前一篇Hadoop完全分布式配置完全一样，不清...
分类：
其他好文 时间：
2014-11-24 13:52:13
阅读次数：
217
网络上找的，很实用：/** * * @param zkIp * @param zkPort * @param tablename * @param startRow 传null扫全表 * @param stopRow 已~结尾 * @th...
分类：
其他好文 时间：
2014-11-24 13:19:13
阅读次数：
197
图解Nosql（hbase）与传统数据库的区别http://www.aboutyun.com/thread-7804-1-1.html(出处: about云开发)问题导读：1.nosql数据库能否删除列2.nosql数据库如何删除一条记录3.nosql数据库列族和lieder区别是什么？4.nosq...
分类：
数据库 时间：
2014-11-23 23:00:51
阅读次数：
245
Hbase支持的Hadoop版本http://hbase.apache.org/book/configuration.html#hadoop解压文件后，配置conf目录下的3个文件：hbase-env.sh（设定JAVA_HOME）regionserver（将slaves相应的IP加入）hbase-...
分类：
其他好文 时间：
2014-11-22 20:12:55
阅读次数：
264
1.1 产品概述
VDataHub基于Apache Sqoop，最初定位是用于将关系数据库中的数据导入Hadoop/Hive/HBase。Sqoop基于Hadoop的MapReduce来完成数据导入导出工作，提供了很好的容错性。刚开始项目组也仅仅直接采用社区版本来完成数据导入导出。但在使用过程中，我们发现有很多地方是Sqoop现有版本没法支持的，如果不解决，是不能用于现有数据平台建设中的。
基...
分类：
其他好文 时间：
2014-11-21 18:50:54
阅读次数：
317
Hbase自0.92之后开始支持Coprocessor（协处理器），旨在使用户可以将自己的代码放在regionserver上来运行，即将计算程序移动到数据所在的位置进行运算。这一点与MapReduce的思想一致。Hbase的Coprocess分为observer和endpoint两大类。简单说，observer相当于关系型数据库中的触..
分类：
其他好文 时间：
2014-11-21 16:32:34
阅读次数：
251
由于目前公司大量的数据存储在HBase中，各个业务线需要对HBase进行即时查询，但是又不方便实现自己的基于HBase Client的API的数据访问实现，他们希望能够像Hive对HDFS中的数据进行ETL一样，可以对HBase中的数据进行SQL操作 我们最初考虑的方式是Hive On HBa...
分类：
其他好文 时间：
2014-11-21 12:27:24
阅读次数：
190
即不同的集群在hdfs上建立不同的根目录和Zooeekper的根目录。如图所示：原来的hbase-0.94.14版本中在hdfs上目录是hbase，zookeeper的根目录是zookeeper_data。hbase-0.96.8版本中在hdfs上目录是index，zookeeper的根目录是zoo...
分类：
其他好文 时间：
2014-11-20 21:46:08
阅读次数：
146
为了支持hbase0.98.6，需要重新编译spark1. 下载spark 1.1.0源代码，以及scala-2.10.4的bin包。将环境变量 SCALA_HOME 设置为scala-2.10.4 的目录位置。2. 下载较新的pom.xml (https://github.com/tedyu/sp...
分类：
其他好文 时间：
2014-11-19 12:16:35
阅读次数：
481
