主机 echo "sh /root/iptables.sh" >> /etc/rc.local echo "mount /dev/sdb /data" >> /etc/rc.local chmod +x /etc/rc.d/rc.local 1.文件系统配置新部署MongoDB集群,应部署与cent ...
分类:
数据库 时间:
2020-07-26 15:21:19
阅读次数:
122
1- 环境规划说明 1.1- 系统环境 节点信息 节点角色 主机名 IP cpu ram disk kernel 组件 master/worker master 192.168.23.135 2 8G 80G kernel-lt-4.4.227 etcddockerflannelkube-sched ...
分类:
Web程序 时间:
2020-07-26 00:32:27
阅读次数:
296
月初的时候,Flink 终于发布 1.11.0 版本, CDC 的功能还是比较期待的(虽然比预期差很多) 当然是升级一波了 最新的代码已经上传到 GitHub : https://github.com/springMoon/sqlSubmit 跑 sqlSubmit 的代码,随便来个 kafka t ...
分类:
数据库 时间:
2020-07-26 00:01:52
阅读次数:
179
第2章 Jenkins Server的安装部署方式 1.1 安装依赖 1.2 安装部署 1.2.1 使用Tomcat部署 1.2.2 CentOS环境部署 1.2.3 MacOS环境部署 1.2.4 基于Docker部署 1.2.5 基于Kubernetes部署 1.2.6 基于Windows部署 ...
分类:
其他好文 时间:
2020-07-22 15:45:59
阅读次数:
86
1.运行环境 有一些三种方式获取当前环境 getExecutionEnvironment() createLocalEnvironment() createRemoteEnvironment 2.批处理 ExecutionEnvironment env = ExecutionEnvironment. ...
分类:
其他好文 时间:
2020-07-21 11:37:59
阅读次数:
68
DataStream API(一) 在了解DataStream API之前我们先来了解一下Flink API的构成。Flink API是分层的。由最底层的Stateful Stream Process到最顶层的SQL分为四层。如下图: DataStream API 顾名思义,就是DataStream ...
1.官网下载jar包: https://www.apache.org/dyn/closer.lua/flink/flink-1.10.1/flink-1.10.1-bin-scala_2.11.tgz 2.上传jar包并且解压: 3.进入/flink-1.10.1/conf/flink-conf.y ...
分类:
系统相关 时间:
2020-07-16 00:06:51
阅读次数:
96
Hadoop原生的计算框架MapReduce,简单概括一下:进程量级很重,启动很慢,但能承载的数据量很大,效率相较于Spark微批处理和Flink实时来讲很慢,Shuffle任何一个写MR同学都必须掌握的东西,说难不难,说简单也不简单 MapReduce程序的五个阶段: input map shuf ...
分类:
其他好文 时间:
2020-07-15 15:53:30
阅读次数:
58