集群zookeeper myid 环境配置 集群启动，在每台机子上都执行 查看集群状态 hbase环境配置 查看版本 hbase env.sh hbase site.xml regionservers master启动hbase 集群启动状态，主节点是HMaster,其余是HRegionServer ...
分类：
其他好文 时间：
2019-04-14 20:39:39
阅读次数：
215
1、首先生成自定义过滤器，生成jar包，然后拷贝到服务器hbase目录的lib下。 1.1 自定义过滤器CustomFilter 1.2 MyFilterProtos是通过protobuf生成的 proto文件 1.3 编辑成jar包，发布到hbase的lib目录 2、使用自定义过滤 2.1 程序中 ...
分类：
其他好文 时间：
2019-04-14 19:26:21
阅读次数：
156
一.?nosql(非关系性数据库): mongoDB hbase redis nulch hive pig mahout zookeeper 二：redis 数据类型 1.存储string: 常用命令： 设置/取值： set key value get key getset key value de ...
分类：
其他好文 时间：
2019-04-13 00:52:24
阅读次数：
149
1. hbase简介 1.1. 什么是hbase HBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBASE的目标是存储并处理大型的数据，更具体来说是仅需使用普通的硬件配置，就能够处理由成千上万的行和列所组 ...
分类：
其他好文 时间：
2019-04-11 16:07:50
阅读次数：
161
Kettle——shell交互命令 在kettle上开发了job或transform可以以单独的文件存在，也可以存放在资源库中。调用这些程序可以通过shell脚本调用，记录下： 资源库中的job： 单个文件的job： 单个文件的transform: kitchen.sh 相关参数说明 pan.sh ...
分类：
系统相关 时间：
2019-04-09 16:35:29
阅读次数：
199
下图是HBase官方文档上对操作系统环境的几点配置要求：1、关闭透明大页echo‘never‘>/sys/kernel/mm/transparent_hugepage/enabledecho‘never‘>/sys/kernel/mm/transparent_hugepage/defrag//这一步是需要加入到开机自启动中，才可以关闭的//THP是一种动
分类：
其他好文 时间：
2019-04-09 09:26:14
阅读次数：
146
前提条件： 成功安装了 jdk1.8, hadoop2.7.3 注意条件： zookeeper,hbase 版本必须要和hadoop 安装版本相互兼容，否则容易出问题； 本次：安装包 zookeeper-3.4.9.tar.gz 和 hbase-1.2.4-bin.tar.gz zookeeper ...
分类：
其他好文 时间：
2019-04-07 18:08:38
阅读次数：
245
待计算的wordCount文件放在HDFS上。 wc.txt： 目标：进行WordCount计算，把结果输出到HBase表中 1.先在HBase中创建表wc 2. WCRunner.class 3. Mapper 4. Reducer 5. Eclipse Console输出 SLF4J: Clas ...
分类：
其他好文 时间：
2019-04-07 09:33:44
阅读次数：
162
1 基本介绍 1.1 前言 HBase – Hadoop Database。是一个分布式的、面向列的开源数据库，该技术来源于 Fay Chang 所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System）所提 ...
分类：
其他好文 时间：
2019-04-06 23:02:55
阅读次数：
729
在eclipse中连接到HBase报错org.apache.hadoop.hbase.PleaseHoldException: Master is initializing，搜索了好久，网上其它人说的解决办法对我都没用： - 做时间同步 - hbase-site.xml中参数hbase.rootdi ...
分类：
Web程序 时间：
2019-04-06 14:11:13
阅读次数：
201
