from：https://blog.csdn.net/zhanglh046/article/details/78505038 一 Spark SQL运行架构Spark SQL对SQL语句的处理和关系型数据库类似，即词法/语法解析、绑定、优化、执行。Spark SQL会先将SQL语句解析成一棵树，然后 ...
分类：
数据库 时间：
2020-03-08 16:00:50
阅读次数：
107
1. nvl nvl(value,default_value) 空字段赋值，若value为空，则赋值default_value；若value非空，则返回原本value值。 default_value可以是数值、'字符串'，也可以是字段 2. case...when...then...end case ...
分类：
其他好文 时间：
2020-03-07 13:08:46
阅读次数：
96
先把大家都知道的分桶抽样查询 的语法以及用法po出 select * from 分桶表 tablesample(bucket x out of y on 分桶字段); 假设当前分桶表，一共分了z桶！ x: 代表从当前的第几桶开始抽样 0<x<=y y: z/y 代表一共抽多少桶！ y必须是z的因子或 ...
分类：
其他好文 时间：
2020-03-06 21:54:38
阅读次数：
95
先对数据分个类企业数据管理的内容及范畴通常包括交易数据、主数据以及元数据。（1）交易数据：用于纪录业务事件，如客户的订单，投诉记录，客服申请等，它往往用于描述在某一个时间点上业务系统发生的行为。（2）主数据：主数据则定义企业核心业务对象，如客户、产品、地址等，与交易流水信息不同，主数据一旦被记录到数据库中，需要经常对其进行维护，从而确保其时效性和准确性；主数据还包括关系数据，用以描述主数据之间的关
分类：
其他好文 时间：
2020-03-05 19:24:21
阅读次数：
185
文件源自 LaTeX科技排版 https://www.latexstudio.net/archives/11990 为了让孩子练字，找了一个空白表格，里面有pdf文件可直接打印也可编辑。 在编辑过程中解决问题记录一些。 在hanzibox.sty 中 去掉 RequirePackage{hanpin ...
分类：
其他好文 时间：
2020-03-04 21:12:15
阅读次数：
128
hive只是一个客户端，只要安装机器上有jdk和Hadoop就可以，解压即用 因为hive默认是derby数据库，而derby数据库的弊端如下 ①默认只会从当前目录下读取metastore_db的库文件 ②不支持多实例同时使用一个库 所以重点是如何配置数据库在MySQL上 1、检查有没有旧的MySQ ...
分类：
其他好文 时间：
2020-03-04 15:08:30
阅读次数：
68
1. 加载后页面样式错乱 原因: 是因为amazeui样式文件无法访问 解决: 使用镜像网站, https://cdnjs.com/libraries/amazeui 中的 https://cdnjs.cloudflare.com/ajax/libs/amazeui/2.7.2/css/amazeu ...
分类：
Web程序 时间：
2020-03-03 22:17:41
阅读次数：
89
Kali虚拟机的扩容经历 0x01 起因 更新了一下软件包，竟然提示我空间不足。 磁盘信息如下： 于是就想着，扩容一下。 0x02 操作过程 扩充磁盘容量 我以为在虚拟机关机状态下进入虚拟机设置，直接点扩展即可，可事实却非如此。对此我只能说声呵呵??。 扩到128G,我们打开虚拟机看看去。 打开后， ...
分类：
其他好文 时间：
2020-03-03 13:09:14
阅读次数：
68
Hadoop： 50070：HDFS WEB UI端口 8020 ： 高可用的HDFS RPC端口 9000 ： 非高可用的HDFS RPC端口 8088 ： Yarn 的WEB UI 接口 8485 ： JournalNode 的RPC端口 8019 ： ZKFC端口 Zookeeper: 218 ...
分类：
Web程序 时间：
2020-03-03 01:09:01
阅读次数：
118
1. 打开配置文件 2. 替换官方源为阿里云源 `:%s/archive.ubuntu/mirrors.aliyun/g` ...
分类：
系统相关 时间：
2020-03-03 00:53:55
阅读次数：
107
