一、安装&启动 下载 https://hbase.apache.org/downloads.html 快速开始文档 https://hbase.apache.org/book.html quickstart 启动 基本操作 进入控制台 报错 list 显示数据库表 Describe 表名 Scan ...
分类:
其他好文 时间:
2019-12-09 11:47:22
阅读次数:
116
大数据由一系列技术组成,那他们之间的关系是怎么组成的ne,请看下图: hadoop主要做了文件存储系统和提供了一个相对比较弱的mr处理数据的方案 hive是在mr和文件存储系统上面做的升级。 sprak+hbase+hadoop主要解决的是hadoop实时处理数据比较弱的问题 ...
分类:
Web程序 时间:
2019-12-08 10:27:19
阅读次数:
116
1 <!--?xml version="1.0" encoding="UTF-8"?--> hbase hbck -repair 强制修复 如果ok就可以 2 不ok,找到hdfs上对应的该表位置,删除,之后在使用hbase hbck -repair 解决过程: 第一次,使用了方法二,然后解决了问题 ...
分类:
其他好文 时间:
2019-12-08 01:26:29
阅读次数:
128
1 详细异常 2 解决方案 权限问题 sudo -hdfs /mnt/software/hbase-1.2.0-cdh5.16.1/bin/start-hbase.sh 指定特定权限用户 启动集群 ...
分类:
数据库 时间:
2019-12-08 01:10:34
阅读次数:
278
/bin/false是禁止登陆 修改一下HBASE用户的权限解决问题 usermod -s /bin/bash hbase ...
分类:
其他好文 时间:
2019-12-08 01:03:22
阅读次数:
101
在2.0之前HDFS中只有一个NameNode,但对于在线的应用只有一个NameNode是不安全的,故在2.0中对NameNode进行抽象,抽象成NamService其下包含有多个NameNode,但只有一个运行在活跃状态,因此需要zookeeper进行选举和自动转换。一旦active当掉之后zoo ...
分类:
其他好文 时间:
2019-12-07 20:56:20
阅读次数:
159
准备 1、hadoop集群已安装,这里将在Centos7安装Hadoop2.7的基础上安装hbase1.4,所以是同样的三台机器,其规划如下: 2、官网下载安装包:hbase-1.4.12-bin.tar.gz(推荐去清华大学或中科大的开源镜像站)。 3、hbase将部署在三台都已存在的路径/myd ...
分类:
其他好文 时间:
2019-12-06 19:29:47
阅读次数:
95
任何系统都会有各种各样的问题,有些是系统本身设计问题,有些却是使用姿势问题。HBase也一样,在真实生产线上大家或多或少都会遇到很多问题,有些是HBase还需要完善的,有些是我们确实对它了解太少。总结起来,大家遇到的主要问题无非是Full GC异常导致宕机问题、RIT问题、写吞吐量太低以及读延迟较大 ...
分类:
其他好文 时间:
2019-12-06 17:36:30
阅读次数:
107
我们知道,一张 HBase 表包含一个或多个列族。HBase 的官方文档中关于 HBase 表的列族的个数有两处描述:A typical schema has between 1 and 3 column families per table. HBase tables should not be ...
分类:
其他好文 时间:
2019-12-05 13:27:11
阅读次数:
113
(1)、hbase.regionserver.handler.count:该设置决定了处理RPC的线程数量,默认值是10,通常可以调大,比如:150,当请求内容很大(上MB,比如大的put、使用缓存的scans)的时候,如果该值设置过大则会占用过多的内存,导致频繁的GC,或者出现OutOfMemor ...
分类:
其他好文 时间:
2019-12-04 20:28:21
阅读次数:
76