[toc] 一、部署Hadoop本地模式 1. 搭建linux环境 我用的centos7 2. 在/opt目录下创建目录 3. 安装jdk 4. 下载hadoop https://hadoop.apache.org/releases.html 并解压到/opt/module目录 5. 配置hadoo ...
分类：
其他好文 时间：
2020-05-24 23:42:50
阅读次数：
64
本案例旨在让新手从0开始完成一个批量任务的开发 第一步：建表，入参 CREATE TABLE `music_info` ( `id` int(10) NOT NULL AUTO_INCREMENT COMMENT '主键id', `singer_name` varchar(100) NOT NULL ...
分类：
数据库 时间：
2020-05-24 16:39:49
阅读次数：
407
1、Hbase集群的高可用性与伸缩性 HBase可以实现对Regionserver的监控，当个别Regionserver不可访问时，将其负责的分区分给其他Regionsever，其转移过程较快，因为只需要将分区的相关信息转移。Hlog和表中数据实际存储在HDFS上，本身具有多副本机制容错。 Mast ...
分类：
其他好文 时间：
2020-05-23 20:00:09
阅读次数：
88
创建表 CREATE TABLE `products` ( `id` int(11) NOT NULL AUTO_INCREMENT, `name` varchar(255) NOT NULL, `price` decimal(10,2) DEFAULT NULL, PRIMARY KEY (`id ...
分类：
数据库 时间：
2020-05-23 14:47:10
阅读次数：
92
一、前言RowKey作为HBase的核心知识点，RowKey设计会影响到数据在HBase中的分布，还会影响我们查询效率，所以RowKey的设计质量决定了HBase的质量。是咱们大数据从业者必知必会的，自然也是面试必问的考察点。 那么rowkey到底是什么呢？原理是什么呢？怎么设计RowKey呢？使用 ...
分类：
其他好文 时间：
2020-05-22 21:32:21
阅读次数：
68
问题描述： 昨天晚上都下班了，突然领导发消息实时数据没有了，我去什么鬼，我记得我走的时候数据还是正常启动的，怎么就没数据那， 我们数据是通过flink 从kafka 消费数据，然后写入到hbase.怎么就没数据那什么情况。 然后我去yarn的资源管理器上面查看运行情况 发现，程序挂掉了，什么情况。好 ...
分类：
其他好文 时间：
2020-05-22 19:12:15
阅读次数：
88
1 前言 本文来自回答思否网友的一个问题，这个网友新建了一张表， 设为 ，`AUTO_INCREMENT 9`, 当他插入数据的时候，发现主键值是从 开始的，所以产生了疑惑。这篇文章一起来讨论一下自增字段问题。 2 自增字段计算方式 自增字段取值和 参数和 参数有关， 参数设置的是自增字段偏移值，也 ...
分类：
数据库 时间：
2020-05-22 16:50:31
阅读次数：
57
基础信息介绍 测试库：test； 测试表：user； user表定义： CREATE TABLE `user` ( `id` int(11) NOT NULL AUTO_INCREMENT, `name` char(30) NOT NULL, `age` int(11) NOT NULL, `gen ...
分类：
数据库 时间：
2020-05-22 13:08:54
阅读次数：
75
前期准备：hadoop HA环境已搭建成功，zookeeper能正常运行。 安装流程： 1.解压tar zxvf hbase 1.2.6 bin.tar.gz （当前1.2. 版本最为稳定，1.3. 还在优化中） vi /etc/profile?环境变量 export?HBASE_HOME=/had ...
分类：
其他好文 时间：
2020-05-21 19:00:42
阅读次数：
50
hbase权威指南 第四版中文版pdf是一部专注于hbase开源数据库方面的电子书籍，这部电子书详细讲解了Hbase原理、基本概念、基本架构等内容，感兴趣的朋友欢迎来绿色资源网下载使用！ hbase权威指南 第四版中文版介绍 《HBase权威指南》探讨了与Hadoop的高度集成如何使HBase的可伸 ...
分类：
其他好文 时间：
2020-05-21 16:37:27
阅读次数：
113
