zookeeper 的由来 分布式系统的很多难题，都是由于缺少协调机制造成的。在分布式协调这块做得比较好的，有 Google 的 Chubby 以及 Apache 的 Zookeeper。Google Chubby 是一个分布式锁服务，通过 Google Chubby 来解决分布式协作、Master ...
分类：
其他好文 时间：
2018-11-19 15:39:27
阅读次数：
200
为什么需要权限管理 1、安全性：误操作、人为破坏、数据泄露等； 2、数据隔离：不同的权限能看到及操作不同的数据； 3、明确职责：运营、客服等不同角色，leader和dev等不同级别 权限管理核心 1、用户—权限：人员少，功能固定，或者特别简单的系统； 2、RBAC（Role-Based Access ...
分类：
其他好文 时间：
2018-11-18 16:06:43
阅读次数：
201
（一）、环境介绍1、服务器的相关设置：1、kafka1:172.20.67.522、kafka2:172.20.67.563、kafka3:172.20.67.572、zookeeper所需的三个端口1、21812、28883、3888三个端口的作用：2181:对客户端提供服务2888:集群内机器通讯使用（Leader监听此端口）3888:选举leader使用3、kafka所需的端口9092：ka
分类：
其他好文 时间：
2018-11-12 19:59:13
阅读次数：
254
（一）、环境介绍1、服务器的相关设置：1、kafka1:172.20.67.522、kafka2:172.20.67.563、kafka3:172.20.67.572、zookeeper所需的三个端口1、21812、28883、3888三个端口的作用：2181:对客户端提供服务2888:集群内机器通讯使用（Leader监听此端口）3888:选举leader使用3、kafka所需的端口9092：ka
分类：
其他好文 时间：
2018-11-12 18:37:18
阅读次数：
237
一个典型的Kafka集群中包含若干Producer（可以是web前端产生的Page View，或者是服务器日志，系统CPU、Memory等），若干broker（Kafka支持水平扩展，一般broker数量越多，集群吞吐率越高），若干Consumer Group，以及一个Zookeeper集群。Kafka通过Zookeeper管理集群配置，选举leader，以及在Consumer Group发生变化时进行rebalance。Producer使用push模式将消息发布到broker，Consumer使用pull模式从broker订阅并消费消息。
分类：
其他好文 时间：
2018-11-10 23:53:56
阅读次数：
231
微服务中的服务注册与发现 传统的项目中，某个服务访问另一个服务，可以通过在配置文件中记录其他服务静态地址的形式进行访问，通常这个配置文件也很少更新，模式如下图： 而在微服务中，每个功能可能都是一个独立的服务，如果通过传统的方式配置每个应用，配置文件会变得很复杂多变，所以我们需要服务的注册与发现。 注 ...
分类：
其他好文 时间：
2018-11-07 11:43:33
阅读次数：
616
There is a company that has N employees(numbered from 1 to N),every employee in the company has a immediate boss (except for the leader of whole compa ...
分类：
其他好文 时间：
2018-11-02 13:00:26
阅读次数：
154
组提交难点一.给leader进程带来了不公平二.兼顾redo和binlog顺序的对应三.事务redo与binlog的写流程与fsync时机（没有引进组提交时的流程）四.为什么要组提交？（简单组提交下的弊病，硬件资源速度的不一致性，带来的优势）关键参数与流程flush阶段将Binlog写入内存,(好像没有Binlogbuffer的说法，直接写入内存，内存写入条带文件)。binlog_max_flus
分类：
数据库 时间：
2018-11-01 16:03:19
阅读次数：
168
1.概述平时在使用Kafka的时候，可能关注的更多的是Kafka系统层面的。今天来给大家剖析一下Kafka的控制器，了解一下Kafka控制器的选举流程。2.内容Kafka控制器，其实就是一个Kafka系统的Broker。它除了具有一般Broker的功能之外，还具有选举主题分区Leader节点的功能。在启动Kafka系统时，其中一个Broker会被选举为控制器，负责管理主题分区和副本状态，还会执行分
分类：
其他好文 时间：
2018-10-31 19:58:45
阅读次数：
142
Consul之：key/value存储 key/value作用 动态修改配置文件 支持服务协同 建立leader选举 提供服务发现 集成健康检查 除了提供服务发现和综合健康检查,Consul还提供了一个易于使用的键/值存储。这可以用来保存动态配置,协助服务协调,建立领导人选举,并启用其他开发人员可以 ...
分类：
其他好文 时间：
2018-10-31 12:29:34
阅读次数：
161
