Flink的优势和特点： 一、同时支持高吞吐、低延迟、高性能 Flink是目前开源社区中唯一一套集高吞吐、低延迟、高性能三者于一身的分布式流式数据处理框架。Apache Spark也只能兼顾高吞吐和高性能特点，主要是因为Spark Streaming流式计算中无法做到低延迟保障；而流式计算框架Apa ...
分类：
其他好文 时间：
2020-12-03 11:33:38
阅读次数：
5
停用全部正在运行的容器 [root@server3 ~]# docker stop $(docker ps -q) 删除全部容器 [root@server3 ~]# docker rm $(docker ps -aq) 一条命令实现停用并删除所有容器 docker stop $(docker ps ...
分类：
其他好文 时间：
2020-12-02 12:48:25
阅读次数：
15
1.linux常用命令 1.1 系统命令 runlevel # 查看当前的运行级别systemctl status sshd # 开启网络服务功能 stop # 关闭 restart # 重启 reload # 重载reboot # 重启halt # 关机poweroff # 关机 1.2 查看文件 ...
分类：
系统相关 时间：
2020-12-01 11:56:19
阅读次数：
30
新生代垃圾收集器 1. Serial收集器 serial收集器即串行收集器，是一个单线程收集器。 串行收集器在进行垃圾回收时只使用一个CPU或一条收集线程去完成垃圾回收工作，并且会暂停其他的工作线程（stop the world），直至回收完成。适用于运行在client模式下的JVM。 在单CPU年 ...
分类：
其他好文 时间：
2020-12-01 11:55:56
阅读次数：
4
前段时间跟一个朋友聊起kafka,flint,spark这些是不是某种分布式运算框架。我自认为的分布式运算框架最基础条件是能够把多个集群节点当作一个完整的系统，然后程序好像是在同一台机器的内存里运行一样。当然，这种集成实现方式有赖于底层的一套消息系统。这套消息系统可以把消息随意在集群各节点之间自由传 ...
分类：
其他好文 时间：
2020-11-30 16:09:25
阅读次数：
9
第一步：安装 crontab ，命令 yum -y install vixie-cron 扩展：service crond start //启动服务 service crond stop //关闭服务 service crond restart //重启服务 service crond reload ...
分类：
系统相关 时间：
2020-11-27 11:08:43
阅读次数：
11
一）编写ini文件，用button实现加载界面 cl_animationWin={ type="window" x=0 y=0 w=1024 h=600 style="cl_normalwin" flags={ window_splash } ... cl_picLoadingButton={ ty ...
分类：
其他好文 时间：
2020-11-27 10:52:54
阅读次数：
6
###Spark中的UDF Spark1.6只能创建临时UDF，不支持创建持久化的UDF。 从Spark-2.0开始，SparkSQL支持持久化的UDF，目前看来是支持UDAF ###Spark中的UDF 过程 (1)自定义UDF类，实现UDF1/2/3....22中的接口之一，其中UDF后跟的数字 ...
分类：
其他好文 时间：
2020-11-26 15:06:55
阅读次数：
6
Java并发编程系列34|深入理解线程池（下）收录于话题#java976#程序员2286#并发编程238#进阶架构师|并发编程专题12★★★建议星标我们★★★公众号改版后文章乱序推荐，希望你可以点击上方“Java进阶架构师”，点击右上角，将我们设为★“星标”！这样才不会错过每日进阶架构文章呀。2020年Java原创面试题库连载中【000期】Java最全面试题库思维导图【001期】JavaSE面试题
分类：
编程语言 时间：
2020-11-24 12:57:49
阅读次数：
11
最近经常有小伙伴留言，核心问题都比较类似，就是虽然接触Spark有一段时间了，但是搞不明白一个问题，为什么我从HDFS上加载不同的文件时，打印的分区数不一样，并且好像spark.default.parallelism这个参数时不是一直起作用？其实笔者之前的文章已有相关介绍，想知道为什么，就必须了解S... ...
分类：
其他好文 时间：
2020-11-23 12:25:04
阅读次数：
5
