用户维度表 属于拉链表 应用场景：缓慢变化的表 特点：历史数据和最新数据在一张表中 图解： sql重点：union all , 如何找到并修改旧的end_date insert overwrite table dwd_dim_user_info_his_tmp select * from ( sel ...
分类：
其他好文 时间：
2021-02-25 12:11:02
阅读次数：
0
数据库版本(select version();): 5.7.32-log sakila 下载地址: https://dev.mysql.com/doc/index-other.html type 表示 MySQL 在表中找到所需行的方式, 又称"访问类型". ALL, index, range, r ...
分类：
数据库 时间：
2021-02-23 14:29:19
阅读次数：
0
pyspark有个bug, 虽然下面代码写了 write.mode("overwrite")但是不生效 spark.conf.set("hive.exec.dynamic.partition.mode", "constrict") db_df.repartition(1).write.mode("o ...
分类：
其他好文 时间：
2021-02-23 14:14:20
阅读次数：
0
在hive客户端建一张表比如bb 条件bb与abc表结构相同，abc有数据，把abc的数据导到bb里 hive -e是为了解决每次进入客户端的麻烦操作，使用了hive -e命令，可以在hive客户端外对客户端进行操作， 例如 hive -e "use aaa;select * from abc li ...
分类：
其他好文 时间：
2021-02-22 12:21:51
阅读次数：
0
hive的数据类型分为基本数据类型，数字类型，字符串类型 基本数据类型包括 TINYINT, SMALLINT, INT/INTEGER, BIGINT, FLOAT, DOUBLE, DECIMAL, BOOLEAN, BINARY hive的数字类型 分为整数类型，浮点数类型 hive的字符串类 ...
分类：
其他好文 时间：
2021-02-22 11:50:45
阅读次数：
0
[root@op-benchmark-216 ~]# cat /etc/dhcp/dhcpd.conf # dhcpd.conf # # Sample configuration file for ISC dhcpd # # option definitions common to all supp ...
分类：
其他好文 时间：
2021-02-20 12:34:38
阅读次数：
0
前言 昨天还是周末，公司群里就有人@，说集群有问题了，敲完Hive一直卡在那里进不去，于是我很快登上WebUi，看到了这么一幕：这台节点的磁盘满了，其他的数据分布都比较平均 为什么会这样 这里就不得不说一下HDFS复本存放策略了： namenode如何选择在哪个datanode存储复本（replic ...
分类：
其他好文 时间：
2021-02-20 12:16:37
阅读次数：
0
1.前言 在官方 axios 中，还提供了 axios.all和axios.spread 这两个方法，这两个方法主要是为了执行多个并发请求，官方文档中，它们的用法示例如下： function getUserAccount() { return axios.get('/user/12345'); } ...
分类：
移动开发 时间：
2021-02-19 13:38:48
阅读次数：
0
valgrind是很好的检查内存泄漏的工具 使用命令： $ valgrind --tool=memcheck --log-file=/root/valgrind_log_all --leak-check=full --error-limit=no --show-reachable=yes --tra ...
分类：
其他好文 时间：
2021-02-19 13:36:36
阅读次数：
0
0 引言 本文将常用的指令记录下来，以备查询。 1 git Command Meaning Reference Linking git status view all files' state, tracked or untracked, commited or un commited git st ...
分类：
系统相关 时间：
2021-02-19 13:10:17
阅读次数：
0
