前沿: Hive也采用类SQL的语法, 但其作为数据仓库, 与面向OLTP的传统关系型数据库(Mysql/Oracle)有着天然的差别. 它用于离线的数据计算分析, 而不追求高并发/低延时的应用场景. 最显著的特别是, Hive的数据是Schema On Read, 对数据的写入非常的自由和松散,....
分类：
其他好文 时间：
2014-07-07 09:53:53
阅读次数：
262
HBase开发环境搭建过程中可能遇到的异常：No FileSystem for scheme: hdfs...
分类：
其他好文 时间：
2014-07-03 17:10:28
阅读次数：
295
【甘道夫】Hadoop2.2.0环境使用sqoop-1.4.4将Oracle11g数据导入HBase0.96，并自动生成组合行键...
分类：
数据库 时间：
2014-07-02 15:23:24
阅读次数：
276
用户： whnaproject 所属表空间： whnaproject 新用户 ： wniec 所属新表空间： wniec 要求：将用户whnaproject中的数据库表以及数据 ，全部复制到新表空间wniec的wniec用户中。 常规过程：用exp命令把...
分类：
其他好文 时间：
2014-07-01 20:54:23
阅读次数：
182
数据导入的来源可以是其他应用程序的输出，也可以是指定的文本文件，这里采用指定的文本文件。 1. 首先，确定导入的数据源，这里是待导入的，按固定格式的文本文件。 2. 然后，依照导入的文件格式，确定想导入的目标数据表，这个数据表如果没有，可以依照待导入的文本文件格式，创建一个相对应的数据表。 3. 最...
分类：
数据库 时间：
2014-07-01 19:01:36
阅读次数：
258
今天试图用heidisql 导入一个150M的数据文件(.sql), 结果报out of memory 错误。在网上搜了很多案例，都没能解决问题。我甚至怀疑是mysql 的default的内存设置的太小了。于是跑到my.ini文件里修改了innodb_buffer_pool_size 为96M * ...
分类：
数据库 时间：
2014-07-01 16:59:24
阅读次数：
395
本章以山寨版Twitter为例介绍HBase Schema设计模式。广义的HBase Schema设计不只包括创建表时指定项，还应该综合考虑Column families/Column qualifier/Cell value/Versions/Rowkey等相关内容。
灵活的Schema&简单的存储视图
Schema设计和数据存储及访问模式关系密切，先回顾下HBase数据模型，有几个要点：...
分类：
其他好文 时间：
2014-07-01 14:35:30
阅读次数：
343
在输出的格式为UTF-8的格式，但是打开CSV文件一直为乱码，后来参考了这里的代码，搞定了乱码问题，原文请参考：http://hbase.iteye.com/blog/1172200 private static void writeBcp( ) throws IOException ...
分类：
编程语言 时间：
2014-07-01 14:16:46
阅读次数：
274
在Spark是一种计算框架，在Spark环境下，不仅支持操作单机文件，HDFS文件，同时也可以用Spark对Hbase操作。
企业中数据源会从HBase取出，这就涉及到了读取hbase数据，本文为了尽可能的让大家能尽快实践和操作Hbase，使用的是Spark Shell 来进行Hbase操作。
一、环境：
Haoop2.2.0
Hbase版本0.96.2-hadoop2, r158109...
分类：
其他好文 时间：
2014-07-01 09:29:54
阅读次数：
499
从应用角度，有两点比较重要：
1. HBase中RowKey是按照字典序排列的
2. 不同Column Family的数据，在物理上是分开的...
分类：
其他好文 时间：
2014-07-01 06:43:31
阅读次数：
203
