配置环境.hadoop2.4hbase0.98.3hive0.13.1(源用的mysql)配置。分2种情况(1.hbase与hive在一台机器上,2.hbase与hive不在同一台机器上)(1)hbase与hive在一台机器上比较简单,只需要在环境变量里把hbase,hive的home配置好即可。当然也可以按照不在一台进行配置。#confighad..
分类:
其他好文 时间:
2014-08-11 18:14:03
阅读次数:
177
我们在上一篇文章《HBase复制》中讲述了如何建立主/从集群,实现数据的实时备份。但是,HBase复制只对设置好复制以后的数据生效,也即,配置好复制之后插入HBase主集群的数据才能同步复制到HBase从集群中,而对之前的历史数据,采用HBase复制这种办法是无能为力的。本文介绍如何使用HBase的导入导出功能来实现历史数据的备份。
1)将HBase表数据导出到hdfs的一个指定目录中,具体命令...
分类:
其他好文 时间:
2014-08-11 17:47:22
阅读次数:
322
直接用hbase shell命令进入shell的时候就会显示版本号:进入shell后,键入version命令,也可以查看版本号:# hbase shell
HBase Shell; enter 'help' for list of supported commands.
Type "exit" to leave the HBase Shell
Version 0.94.7, r1471806, W...
分类:
其他好文 时间:
2014-08-10 18:48:00
阅读次数:
263
第一步:登陆MYSQLmysql -u root -p然后回车,进入(等于用空密码进入)第二步:use mysql;update user set password=password('新密码') where user='root';这步就更新了密码第三步:flush privileges;刷新权限...
分类:
数据库 时间:
2014-08-10 12:38:40
阅读次数:
210
1、在任务一开始运行,注入Url时即出现以下错误。
InjectorJob: Injecting urlDir: urls
InjectorJob: Using class org.apache.gora.hbase.store.HBaseStore as the Gora storage class.
InjectorJob: java.lang.RuntimeException: j...
分类:
其他好文 时间:
2014-08-09 00:18:16
阅读次数:
252
前沿:以前都是用mongodb的,但是量大了,mongodb显得不那么靠谱,改成hbase撑起一个量级。HBase是ApacheHadoop的数据库,能够对大型数据提供随机、实时的读写访问。HBase的目标是存储并处理大型的数据。HBase是一个开源的,分布式的,多版本的,面向列的存储模型。它存储的是..
分类:
编程语言 时间:
2014-08-08 18:28:27
阅读次数:
761
hadoop 2.2.0 和hbase 0.98 安装snappy压缩教程...
分类:
移动开发 时间:
2014-08-07 15:45:00
阅读次数:
463
环境:masterip:192.168.10.10salveip:192.168.10.201)在两台机器上面安装好mysql2)修改mastermy.cnf添加如下几行server-id=1log-bin=/opt/mysql/log/mysql-bin.logdatadir=/opt/mysql/datainnodb_flush_log_at_trx_commit=1sync_binlog=13)修改slavemy.cnf添加如下行serv..
分类:
数据库 时间:
2014-08-07 07:36:00
阅读次数:
271
Cassandra HBase一致性Quorum NRW策略通过Gossip协议同步Merkle Tree,维护集群节点间的数据一致性单节点,无复制,强一致性可用性1,基于Consistent Hash相邻节点复制数据,数据存在于多个节点,...
分类:
其他好文 时间:
2014-08-07 00:21:27
阅读次数:
389
今天安装了hbase想做下测试,结果发现在创建表时报错“can't get master address from zookeeper, zookeeper date = null”,大致是这样描述的,之后查看日志,发现hbase在启动zookeeper时确实报错了,查阅了网上的资料,说hbas.....
分类:
其他好文 时间:
2014-08-06 17:27:52
阅读次数:
218