本次记录是用于:SparkStreaming对接Kafka、HBase记录 一、简介 ①HBase本身是一个菲关系型数据库,存储数据结构时以key-value结构来进行存储,HBase中的数据是稀疏的。 ②基于Hadoop运行,但是HBase的效率在秒级别 ③基于列存储:传统行存储方式在查询特定列时 ...
分类:
其他好文 时间:
2020-02-06 16:53:41
阅读次数:
101
1,背诵单词:outlook:前景,展望 operate:做手术 peach:桃子 rank:排列 oxygen:氧气 overseas:海外的 particular:特别的 paste:粘贴 patch:眼罩 pack:包裹 participate:参加 overtake:追上 modern:现代 ...
分类:
其他好文 时间:
2020-02-06 01:48:50
阅读次数:
92
下载hbase: http://hbase.apache.org/downloads.htmlhttp://mirror.bit.edu.cn/apache/hbase/2.2.3/hbase-2.2.3-bin.tar.gz 解压hbase: 修改配置文件: (1)conf/hbase-env.c ...
1、《HBase基础概念知识学习》 https://www.toutiao.com/i6774215329498268164/ 2、《VM安装CentOS6.5》 https://www.toutiao.com/i6739774433692484109/ 3、《HBase基础环境搭建》 https: ...
分类:
其他好文 时间:
2020-02-02 13:35:37
阅读次数:
73
Spark SQL可以使用JDBC/ODBC或命令行接口充当分布式查询引擎。这种模式,用户或者应用程序可以直接与Spark SQL交互,以运行SQL查询,无需编写任何代码。Spark SQL提供两种方式来运行SQL:通过运行Thrift Server直接执行Spark SQL命令行运行Thrift ... ...
分类:
数据库 时间:
2020-02-01 23:43:35
阅读次数:
126
Hbase 创建表 插入数据 创建表 public static void main(String[] args) throws IOException { // Instantiating configuration class 初始化配置文件 Configuration con = HBaseC ...
分类:
其他好文 时间:
2020-02-01 12:44:11
阅读次数:
90
一、Hbase 简介 hdfs 是分布式文件系统, 只支持在文件层面的增、删除、改(需要把文件下载下来,改完,再上传上去)、查 hbase 是支持海量数据存储的NoSql数据库,基于hdfs的,支持数据的增、删、改、查,支持随机写数据(改指定的某一条数据) hbase 查询数据只能根据rowkey进 ...
分类:
其他好文 时间:
2020-01-30 19:24:15
阅读次数:
78
一、 ZooKeeper 简介 顾名思义 zookeeper 就是动物园管理员,他是用来管 hadoop(大象)、Hive(蜜蜂)、pig(小 猪)的管理员, Apache Hbase 和 Apache Solr 的分布式集群都用到了 zookeeper;Zookeeper: 是一个分布式的、开源的 ...
分类:
其他好文 时间:
2020-01-29 21:51:12
阅读次数:
65
swagger接口文档查看,请求地址:http://localhost:31001/swagger-ui.html 深入剖析Java编程中的中文问题及建议最优解决方法 cd /usr/local/nginx/sbin/ ./nginx 阿里云maven中央仓库配置 MongoDB、HBase、Red ...
分类:
其他好文 时间:
2020-01-28 23:16:33
阅读次数:
95
KV键值对存储大家都很熟悉了,Java 中的 map 都是在堆内存储,如果我们遇到一种情况是map特别大,每次GC我们不想释放这些空间,那么这一部分缓存数据又该如何处理呢?当然大家说可以使用第三方缓存组件:Redis,HBase,MongoDB,今天给大家多一种选择:堆外内存。 今天要给大家介绍的是 ...
分类:
编程语言 时间:
2020-01-27 15:53:23
阅读次数:
104