基本知识:Sqoop导出的基本用法:https://sqoop.apache.org/docs/1.4.6/SqoopUserGuide.html#_syntax_4 的10. sqoop-export 内容摘要:本文主要是对--update-mode参数的用法进行了验证。结论如下: --updat ...
分类:
数据库 时间:
2021-06-25 17:26:06
阅读次数:
0
环境说明:centos 7 主机使用kvm创建openstack动态扩容根分区镜像。 安装kvm包 创建kvm网络环境 上传centos ISO镜像 自行上传镜像到宿主机上。本教程将镜像上传到 目录。 创建qcow2文件 启动kvm虚机 安装系统自行决定怎么安装,分区最好手动分区。 安装好系统,是让 ...
分类:
其他好文 时间:
2021-06-25 16:57:09
阅读次数:
0
乾乾君子 2019-02-21 15:21:02 23370 收藏 34分类专栏: 杂记 文章标签: linux centos swap分区版权 Linux SWAP交换分区,就是我们课本说讲过的虚拟内存的概念。当Linux系统的物理内存不够用的时候,就需要将物理内存中的一部分空间释放出来,以供当前 ...
分类:
系统相关 时间:
2021-06-24 18:29:21
阅读次数:
0
什么是任务调度 大数据平台技术框架支持的开发语言多种多样,开发人员的背景差异也很大,这就产生出很多不同类型的程序(任务)运行在大数据平台之上,如:MapReduce、Hive、Pig、Spark、Java、Shell、Python 等。 这些任务需要不同的运行环境,并且除了定时运行,各种类型之间的任 ...
分类:
其他好文 时间:
2021-06-23 17:16:53
阅读次数:
0
一、查看新添加的磁盘 二、分区 查看分区结果 创建物理卷 将添加新的物理卷,加载到centos卷组,使用vgextend centos /dev/sdb1命令 增加/dev/mapper/centos-root大小,增加100G。使用lvresize -L +100G /dev/mapper/cen ...
分类:
系统相关 时间:
2021-06-23 17:08:30
阅读次数:
0
目录 一、磁盘结构 二、MBR与磁盘分区表示 三、磁盘分区结构 四、文件系统类型 五、检测并确认新硬盘 六、创建文件系统 七、挂载、卸载文件系统 八、查看磁盘使用情况 九、设置文件系统的自动挂载 一、磁盘结构 1、硬盘的物理结构 盘头:硬盘有多个盘片,每盘片2面 磁头:每面一个磁头 2、硬盘的数据结 ...
分类:
系统相关 时间:
2021-06-21 21:04:58
阅读次数:
0
分区分页分段 重定向就是对他的地址重新计算 存储管理技术 简单和虚拟的区别就是:一个进程是否全部装进内存才能运行,如果需要全部装入内存才能运行就叫做简单存储 简单分区技术 ...
分类:
其他好文 时间:
2021-06-21 20:47:38
阅读次数:
0
HIVE中处理的数据往往比较多,在处理数据的时候希望给处理得到的数据一个ID标识,这时候可以用到UUID。 UUID的算法的核心思想是结合机器的网卡、当地时间、一个随即数来生成UUID。从理论上讲,如果一台机器每秒产生10000000个UUID,则可以保证(概率意义上)3240年不重复。UUID 的 ...
分类:
其他好文 时间:
2021-06-21 20:24:19
阅读次数:
0
每个Linux使用者在安装Linux时都会遇到这样的困境:在为系统分区时,如何精确评估和分配各个硬盘分区的容量,因为系统管理员不但要考虑到当前某个分区需要的容量,还要预见该分区以后可能需要的容量的最大值。因为如果估 计不准确,当遇到某个分区不够用时管理员可能甚至要备份整个系统、清除硬盘、重新对硬盘分 ...
分类:
其他好文 时间:
2021-06-21 20:23:57
阅读次数:
0
磁盘管理与文件系统 一、磁盘结构 1)硬盘的物理结构 2)硬盘的数据结构 二、MBR与磁盘分区表示 三、硬盘分区结构 四、文件系统类型 1)XFS文件系统 2)SWAP,交换文件系统 3)Linux支持的其它文件系统类型 五、检测并确认新硬盘 1)查看或管理磁盘分区 2)管理磁盘分区 3)创建分区步 ...
分类:
其他好文 时间:
2021-06-21 20:12:08
阅读次数:
0