KubeOperator是一个开源项目，在离线网络环境下，通过可视化WebUI在VMware、Openstack或者物理机上规划、部署和运营生产级别的Kubernetes集群。这个还是很有吸引力的。第一次安装马上就成功这是大佬的常态吧！但是像我这种小白，在第一步安装就中奖了！那就是遇到磁盘不足，看到不少人也问了。回答的大佬，都是提供思路，或者是叫改脚本，对于小白来说，思路虽然很重要，但是没有用。因
分类：
其他好文 时间：
2020-10-07 20:55:45
阅读次数：
21
1、Sqoop参数 /opt/module/sqoop/bin/sqoop import \ --connect \ --username \ --password \ --target-dir \ --delete-target-dir \ --num-mappers \ --fields-ter ...
分类：
其他好文 时间：
2020-10-06 21:17:18
阅读次数：
41
系统安装1.建议使用VM虚拟机(本文实验环境为VMware15.5Pro)，正常官网下载安装即可2.安装rhel8注意：安装rhel8时，先用VM虚拟机创建一个未指定镜像文件的空虚拟机，先把操作系统硬件配置好再安装操作系统。A,VMware软件提供三种可选网络模式：桥接模式：可通过物理主机访问外网NAT模式：让VMware虚拟机的网络服务发挥路由器的功能，实现访问外网，对应物理网卡VMnet8仅主
分类：
其他好文 时间：
2020-10-05 22:00:16
阅读次数：
22
shuffle阶段 概念 shule 是 Mapreduce 的核心，它分布在 Mapreduce 的 map 阶段和 reduce 阶段。一般把从 Map 产生输出开始到 Reduce 取得数据作为输入之前的过程称作 shule。 一张图看懂Mapreduce全过程 概念解释 Collect阶段 ...
分类：
其他好文 时间：
2020-10-05 21:45:42
阅读次数：
32
集群分发脚本xsync在/usr/local/bin目录下，创建xsync文件[root@yh-hadoop101bin]#pwd/usr/local/bin[root@yh-hadoop101bin]#chmod777xsync[root@yh-hadoop101bin]#lltotal4-rwxr-xr-x1rootroot487Sep2913:58xsync[root@yh-hadoop10
分类：
其他好文 时间：
2020-10-05 21:32:21
阅读次数：
19
VMware Workstation cannot connect to the virtual machine. Make sure you have rights to run the program, access all directories the program uses, and a ...
分类：
系统相关 时间：
2020-09-24 21:43:34
阅读次数：
60
在数据管理领域，我们一直致力于让数据为我们提供价值，为此我们付出大量的努力和投入。在过去二十年，各大企业都在着手搭建数据仓库。当我们费尽艰辛搭建好数据仓库并成功用于线上运行时，发现我们将花费更多时间为数据科学家、分析师做数据准备。分析他们的数据需求，提供闪闪发光的数据报表。这将占用数据维护人员80%的时间投入，这个投入是偏高的，包含如沟通、反查、校正等大量重复和不必要投入。如何提升数据管理能力？我
分类：
其他好文 时间：
2020-09-23 23:53:26
阅读次数：
38
一、数据库管理系统数据库管理系统DBMS是一种操纵和管理数据库的大型软件，用于建立、使用和维护数据库。数据库管理系统分为RDBMS和NoSQL（NotonlySQL）两类。RDBMS关系型数据库管理系统，比较适合安全级别要求高的数据及关系较复杂的数据。常见RDBMS有MySQL、Oracle、MSSQL。NoSQL非关系型数据库，适合于高性能存取数据，一般是配合RDBMS进行使用，针对大数据处理分
分类：
数据库 时间：
2020-09-23 23:42:03
阅读次数：
56
搭建hadoop伪分布式环境时，要先搭建hadoop环境，参考 url: https://www.cnblogs.com/gzgBlog/p/13702720.html 1.进入hadoop配置文件目录 cd /app/hadoop-2.2.0/etc/hadoop 2.修改core-site.xm ...
分类：
其他好文 时间：
2020-09-23 23:32:22
阅读次数：
46
1.了解对比Hadoop不同版本的特性，可以用图表的形式呈现。 DKhadoop发行版：有效的集成了整个HADOOP生态系统的全部组件，并深度优化，重新编译为一个完整的更高性能的大数据通用计算平台，实现了各部件的有机协调。因此DKH相比开源的大数据平台，在计算性能上有了高达5倍（最大）的性能提升。D ...
分类：
其他好文 时间：
2020-09-23 22:58:58
阅读次数：
34
