HBase 版本: 0.98.6thrift 版本: 0.9.0使用 thrift client with python 连接 HBase 报错: 1 Traceback (most recent call last): 2 File "D:\workspace\Python\py\hellow.....
分类:
编程语言 时间:
2015-02-27 16:28:17
阅读次数:
393
sqlnet.ora 添加NAMES.DIRECTORY_PATH= (TNSNAMES, EZCONNECT)SQLNET.ALLOWED_LOGON_VERSION=8
分类:
数据库 时间:
2015-02-27 11:40:30
阅读次数:
125
HBase特点:1.HBase表与表之间没有关联查询2.一个数据行(row)可以有唯一的row key和任意数量的列3.表中的数据无char int 等类型之分HBase基本命令:名称命令表达式创建表create '表名称', '列名称1','列名称2','列名称N'添加记录put '表名称', '...
分类:
其他好文 时间:
2015-02-25 23:40:09
阅读次数:
143
今天apache发布了最新的hbase 1.0.0,下图是版本变迁历史:详情参考:https://blogs.apache.org/hbase/entry/start_of_a_new_era
分类:
Web程序 时间:
2015-02-24 20:58:24
阅读次数:
219
Hbase Mapreduce编程
hadoop,hbase安装参考:http://blog.csdn.net/mapengbo521521/article/details/41777721
hbase表创建数据插入参考:http://blog.csdn.net/mapengbo521521/article/details/43917119
hbase mapreduce参考:http://...
分类:
其他好文 时间:
2015-02-24 15:10:51
阅读次数:
281
Hbase java API
调用
一. hbase的安装
参考:http://blog.csdn.net/mapengbo521521/article/details/41777721
二.hbase访问方式
Native java api:最常规最高效的访问方式。
Hbase shell:hbase的命令行工具,最简单的接口,适合管理员使用
Thrift gateway:利用t...
分类:
编程语言 时间:
2015-02-24 09:11:08
阅读次数:
428
日志收集分析系统架构
一.部署架构
日志收集系统一般包括如图所示三层。Web服务器层,日志收集层,日志存储层。Web服务器层是日志的来源,一般部署web应用供用户访问,产生日志,该节点上一般需要部署日志收集程序的agent。日志收集层手机web服务器产生的日志传输给日志存储层,存储层一般使用分布式文件系统HDFS,日志可以存储在hdfs上或者hbase上。
以scribe作...
分类:
其他好文 时间:
2015-02-23 17:55:28
阅读次数:
265
HDFS: hadoop distributed file system 它抽象了整个集群的存储资源,可以存放大文件。 文件采用分块存储复制的设计。块的默认大小是64M。 流式数据访问,一次写入(现支持append),多次读取。 不适合的方面: 低延迟的数据访问 解决方案:HBASE 大量的小文件 ...
分类:
编程语言 时间:
2015-02-21 14:20:34
阅读次数:
242
用hbase做数据库,但因为hbase没有类sql查询方式,所以操作和计算数据很不方便,于是整合hive,让hive支撑在hbase数据库层面 的 hql查询.hive也即 做数据仓库1. 基于Hadoop+Hive架构对海量数据进行查询:http://blog.csdn.net/kunshan_s...
分类:
其他好文 时间:
2015-02-19 10:44:36
阅读次数:
220
一、HBase(NoSQL)的数据模型
1.1 表(table),是存储管理数据的。
1.2 行键(row key),类似于MySQL中的主键,行键是HBase表天然自带的,创建表时不需要指定
1.3 列族(column family),列的集合。
一张表中有多个行健,一个行健读取出来的是一条记录,列族和MySQL中的列差不多,但是它是列的集合
HBase中列族是需要在定义表时指定的,列...
分类:
其他好文 时间:
2015-02-13 21:15:33
阅读次数:
217