1.1、概述 sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。 导入数据:MySQL,Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统; 导出数据:从Hadoop的文件系统中导出数据到关系数据库mysql等 1.2、sqoop1与 ...
分类:
其他好文 时间:
2020-05-31 19:30:40
阅读次数:
69
Spring Boot版本v1.5.19.RELEASE 1、增加Jar <dependency> <groupId>com.spring4all</groupId> <artifactId>spring-boot-starter-hbase</artifactId> <version>1.0.0. ...
分类:
编程语言 时间:
2020-05-31 16:23:21
阅读次数:
63
1、Integer是int的包装类,int则是java的一种基本数据类型 2、Integer变量必须实例化后才能使用,而int变量不需要 3、Integer实际是对象的引用,当new一个Integer时,实际上是生成一个指针指向此对象;而int则是直接存储数据值 4、Integer的默认值是null ...
分类:
编程语言 时间:
2020-05-31 16:11:00
阅读次数:
86
一:下载jenkins /etc/init.d/jenkins/etc/logrotate.d/jenkins/etc/sysconfig/jenkins/usr/lib/jenkins/usr/lib/jenkins/jenkins.war/usr/sbin/rcjenkins/var/cache ...
分类:
其他好文 时间:
2020-05-31 11:17:54
阅读次数:
54
一、通用优化 1.1、NameNode 的元数据备份使用 SSD 1.2、定时备份 NameNode 上的元数据 建议每小时或者每天备份,如果数据极其重要,可以5~10分钟备份一次。备份可以通过定时任务复制元数据目录即可。 1.3、为 NameNode 指定多个元数据目录 使用 dfs.name.d ...
分类:
系统相关 时间:
2020-05-30 21:52:59
阅读次数:
105
思路 用HashMap类型的cache记录Cache的数据 用List类型的record 记录Cache的各个元素使用情况 record有点类似队列,方便起见,下文就以队列称呼。 对于cache中已有的元素: 若进行get put操作,就将该元素移到队列(record)的最后(即表示该数据最近使用过 ...
分类:
其他好文 时间:
2020-05-30 21:34:36
阅读次数:
48
1、HBase安装说明 JDK1.7以上 Hadoop-2.5.0以上 Zookeeper-3.4.5 2、Hadoop2.6安装 1) 解压 tar -zxvf hadoop-2.6.0.tar.gz 2) 配置hardoop的jdk cd /root/tools/hadoop-2.6.0/etc ...
分类:
其他好文 时间:
2020-05-30 15:46:42
阅读次数:
67
阅读目录 1 安装 2 更新和升级 3 查找和显示 4 删除程序 5 清除缓存 yum(全称为 Yellow dog Updater, Modified)是一个在Fedora和RedHat以及SUSE中的Shell前端软件包管理器。基於RPM包管理,能够从指定的服务器自动下载RPM包并且安装,可以自 ...
分类:
其他好文 时间:
2020-05-30 12:24:42
阅读次数:
86
背景技术:当前,数据中心基于共享磁盘阵列模式的双机集群系统,一般通过在两台服务器上运行高可用性软件和共用磁盘阵列来实现。其有一个明显的缺点,在于存在单点数据故障的可能,即一旦其共享磁盘(磁盘阵列)出现问题,数据安全就得不到保障,整个群集或双机都不可能继续提供核心业务。因而对于核心业务高可用性比较高,并希望实时进行有数据备份及在线备份服务器系统的需求就无法得到满足。技术实现要素:本发明的技术任务是针
分类:
其他好文 时间:
2020-05-29 16:21:58
阅读次数:
84
报错信息如下: 总计 660 kB/s | 735 kB 00:01 警告:/var/cache/dnf/AppStream-a520ed22b0a8a736/packages/wget-1.19.5-8.el8_1.1.x86_64.rpm: 头V3 RSA/SHA256 Signature, 密 ...
分类:
系统相关 时间:
2020-05-29 10:28:32
阅读次数:
283