Oracle 12C DataGuard部署以及维护iverycd 2019-02-10 17:24:04 2842 收藏 4分类专栏: DataGuard版权Oracle 12C DataGuard部署 一、环境部署 二、维护使用 2.1 检查主备库的归档日志号 2.2 检查备库的归档日志同步情况 ...
分类:
数据库 时间:
2020-06-19 23:25:58
阅读次数:
94
Centos7.5基于MySQL5.7的InnoDB Cluster多节点集群环境部署一.MySQL InnoDB Cluster 介绍MySQL的高可用架构解决方案,比如MMM, MHA, NDB Cluster, Galera Cluster, InnoDB Cluster, 腾讯的PhxSQL ...
分类:
数据库 时间:
2020-06-18 19:57:24
阅读次数:
94
一、WaterMark作用 在使用 EventTime 处理 Stream 数据的时候会遇到数据乱序的问题,流处理从 Event(事 件)产生,流经 Source,再到 Operator,这中间需要一定的时间。虽然大部分情况下,传输到 Operator 的数据都是按照事件产生的时间顺序来的,但是也不 ...
分类:
其他好文 时间:
2020-06-18 19:56:39
阅读次数:
187
一、环境准备 1.主机信息 主机名 主机IP地址 备注 broker-k8s-1 192.168.144.131 master &namesrv broker-k8s-2 192.168.144.132 master &namesrv broker-k8s-3 192.168.144.133 mas ...
分类:
其他好文 时间:
2020-06-17 09:14:59
阅读次数:
49
1.自定义sink 在flink中,sink负责最终数据的输出。使用DataStream实例中的addSink方法,传入自定义的sink类 定义一个printSink(),使得其打印显示的是真正的task号(默认的情况是task的id+1) MyPrintSink package cn._51doi ...
分类:
其他好文 时间:
2020-06-16 23:19:16
阅读次数:
61
1. flink简介 1.1 什么是flink Apache Flink是一个分布式大数据处理引擎,可以对有限数据流(如离线数据)和无限流数据及逆行有状态计算(不太懂)。可以部署在各种集群环境,对各种大小的数据规模进行快速计算。 1.2 flink的架构体系 具体见文档 2. flink的安装 修改 ...
分类:
其他好文 时间:
2020-06-16 00:38:14
阅读次数:
46
基本思想 与flink流的join原理不同的是,Spark双流join是对俩个流做满外连接 ,因为网络延迟等关系,不能保证每个窗口中的数据key都能匹配上,这样势必会出现三种情况:(some,some),(None,some),(Some,None),根据这三种情况,下面做一下详细解析: (some ...
分类:
其他好文 时间:
2020-06-15 21:21:14
阅读次数:
156
k8s简单环境的环境部署,需要用到4台机器:master01 192.168.66.10 node01 192.168.66.20node02 192.168.66.21harbor 192.168.66.100 # 前一个文章已经介绍过如何安装harbor了。 一、系统初始化1.设置系统主机名以及 ...
分类:
其他好文 时间:
2020-06-15 12:17:10
阅读次数:
68
1、目的 启动Flink任务方法的命令为 flink run flink.jar 但是有时候启动时需要向里面传入一些参数,比如配置文件的路径等。 2、带参执行命令 首先在代码中配置: ParameterTool parameters = ParameterTool.fromArgs(args); S ...
分类:
其他好文 时间:
2020-06-14 20:33:05
阅读次数:
322
GitLab简介 最初,该产品名为GitLab,是完全免费的开源软件,按照MIT许可证分发。 2013年7月,产品被拆分为:GitLabCE(社区版)和GitLabEE(企业版),当时,GitLabCE和GitLabEE的许可仍然是根据MIT许可分发的免费和开源软件。 Gitlab于2017年1月3 ...
分类:
其他好文 时间:
2020-06-14 20:18:26
阅读次数:
51