1.Spark SQL出现的 原因是什么? Spark SQL的前身是 Shark，Shark最初是美国加州大学伯克利分校的实验室开发的Spark生态系统的组件之一，它运行在Spark系统之上，Shark重用了Hive的工作机制，并直接继承了Hive的各个组件， Shark将SQL语句的转换从Map ...
分类：
数据库 时间：
2021-05-24 04:16:49
阅读次数：
0
1.Spark SQL出现的 原因是什么? 随着Spark的发展，对于野心勃勃的Spark团队来说，Shark对于Hive的太多依赖（如采用Hive的语法解析器、查询优化器等等），制约了Spark的One Stack Rule Them All的既定方针，制约了Spark各个组件的相互集成，所以提出 ...
分类：
数据库 时间：
2021-05-24 03:53:49
阅读次数：
0
1. Glue与Hudi简介 AWS Glue AWS Glue是Amazon Web Services(AWS)云平台推出的一款无服务器(Serverless)的大数据分析服务。对于不了解该产品的读者来说，可以用一句话概括其实质：Glue是一个无服务器的全托管的Spark运行环境，只需提供Spar ...
分类：
Web程序 时间：
2021-05-24 03:46:26
阅读次数：
0
Spark SQL出现的 原因是什么? Spark SQL是Spark用来处理结构化数据的一个模块，它提供了一个叫作Data Frame的编程抽象结构数据模型(即带有Schema信息的RDD),Spark SQL的前身是 Shark，由于 Shark过于依赖Hive，因此在版本迭代时很难添加新的优化 ...
分类：
数据库 时间：
2021-05-24 03:08:56
阅读次数：
0
docker 目录移动到其他磁盘的操作 1.systemctl stop docker #停止docker2.mkdir /storage/docker-lib #在我这个项目里storage是普通硬盘，在storage下创建一个目录3.mv /var/lib/docker /storage/doc ...
分类：
移动开发 时间：
2021-05-24 02:54:47
阅读次数：
0
crontab（定时任务） 1.当linux发行的版本有service这个命令时候(service 是服务。必须root用户才可以支持) service crond status 查看定时任务运行状态命令 service crond start 启动定时任务命令 service crond stop ...
分类：
系统相关 时间：
2021-05-24 01:36:04
阅读次数：
0
通过计算机管理方式 1.右击计算机—管理—服务—启动或停止MySQL服务 2. 通过命令行方式 启动：net start mysql服务名（服务里的名称-MySql） 停止：net stop mysql服务名（服务里的名称-MySql） 一定要以管理员的身份打开cmd命令。 ...
分类：
数据库 时间：
2021-05-04 16:42:28
阅读次数：
0
安装镜像：docker pull 镜像名称 查看所有运行容器：docker ps -a 运行容器：docker run --name 容器名称 进入指定容器：docker exec -it 容器名称 bash 重启容器：docker restart 容器名称 停止所有容器：docker stop $ ...
分类：
其他好文 时间：
2021-05-04 15:53:31
阅读次数：
0
IaaS 平台构建 1.关闭防火墙，禁止开机自启 systemctl stop firewalld systemctl disable firewalld 2.设置主机名 hostnamectl set-hostname controller 设置主机名compute 3.设置selinux，per ...
分类：
其他好文 时间：
2021-04-29 12:11:43
阅读次数：
0
防火墙由netfilter组成,iptables是控制netfilter的软件 iptables(重点）- 用户空间的工具 环境准备 systemctl stop firewalld.service systemctl disable firewalld.service 或systemctl dis ...
分类：
系统相关 时间：
2021-04-28 12:11:32
阅读次数：
0
