max.poll.interval.ms参数用于指定consumer两次poll的最大时间间隔(默认5分钟),如果超过了该间隔consumer client会主动向coordinator发起LeaveGroup请求,触发rebalance;然后consumer重新发送JoinGroup请求 示例如下 ...
分类:
其他好文 时间:
2020-06-28 22:18:58
阅读次数:
547
前面说过了consumer心跳机制:consumer定期向coordinator发送心跳请求,以表明自己还在线;如果session.timeout.ms内未发送请求,coordinator认为其不可用,然后触发rebalance session.timeout.ms:coordinator感知con ...
分类:
其他好文 时间:
2020-06-28 18:30:22
阅读次数:
193
高可用个数最好是大于3的个数 master scheduler 调度器,计算资源,调度到可用的node,交给apiserver ,apiserver写入etcd,kubelet实时读取 controller-manager 管理pod的期望数量,创建或删除pod apiserver 集群访问入口,收 ...
分类:
其他好文 时间:
2020-06-27 16:17:03
阅读次数:
56
C/S模式(Client/Server )客户端和服务端 C/S模式中服务端中主要进行业务交互,数据存储,考虑并发,高可用等,客户端主要是页面展示,将服务端返回去的内容展示在客户端,将客户端提交的信息做一处理 。 B/S(Browser/Server) 浏览器和服务端 B/S模式中服务端用来进行业务 ...
分类:
Web程序 时间:
2020-06-27 13:25:42
阅读次数:
64
RAC, Data Gurad, Stream 是Oracle 高可用性体系中的三种工具,每个工具即可以独立应用,也可以相互配合。 他们各自的侧重点不同,适用场景也不同。 RAC 它的强项在于解决单点故障和负载均衡,因此RAC 方案常用于7*24 的核心系统,但RAC 方案中的数据只有一份,尽管可以 ...
分类:
数据库 时间:
2020-06-27 11:22:46
阅读次数:
47
一、简介 Apache Flume 是一个分布式,高可用的数据收集系统,可以从不同的数据源收集数据,经过聚合后发送到分布式计算框架或者存储系统中。Spark Straming 提供了以下两种方式用于 Flume 的整合。 二、推送式方法 在推送式方法 (Flume-style Push-based ...
分类:
Web程序 时间:
2020-06-27 00:19:37
阅读次数:
77
1、 nginx 可以干啥? (1) 反向代理 (2) 负载均衡 (3) 动静分离 (4) 高可用集群 2、什么是 nginx? Nginx 是高性能的 HTTP 和反向代理的服务器,处理高并发能力是十分强大的,能经受高负载的考验,有报告表明能支持高达 50,000 个并发连接数。 2.1 反向代理 ...
分类:
其他好文 时间:
2020-06-27 00:08:17
阅读次数:
89
一.集群规划 Master Slave1 Slave2 Slave3 IP 192.168.2.131 192.168.2.132 192.168.2.133 192.168.2.134 namenode 有 有 无 无 datanode 有 有 有 有 resourcemanager 无 无 有 ...
分类:
其他好文 时间:
2020-06-26 23:52:47
阅读次数:
80
haproxy+keepalived 集群高可用集群转发 环境介绍 #内核版本 Ubuntu 18.04.4 LTS \n \l 107-Ubuntu SMP Thu Jun 4 11:27:52 UTC 2020 x86_64 x86_64 x86_64 GNU/Linux #节点介绍 192.1 ...
分类:
其他好文 时间:
2020-06-26 22:20:27
阅读次数:
69