由于历史原因,MySQL复制基于逻辑的二进制日志,而非重做日志。多次被问到何时MySQL能支持基于物理的复制,其实这就看MySQL各位大佬的想法。上次和赖老师脑暴,倏地说道:MySQL会不会来个基于Paxos的redo复制? 由于历史原因,MySQL复制基于逻辑的二进制日志,而非重做日志。多次被问到 ...
分类:
数据库 时间:
2019-06-13 23:31:52
阅读次数:
257
由于历史原因,MySQL复制基于逻辑的二进制日志,而非重做日志。多次被问到何时MySQL能支持基于物理的复制,其实这就看MySQL各位大佬的想法。上次和赖老师脑暴,倏地说道:MySQL会不会来个基于Paxos的redo复制? 由于历史原因,MySQL复制基于逻辑的二进制日志,而非重做日志。多次被问到 ...
分类:
数据库 时间:
2019-06-13 12:12:09
阅读次数:
106
由于历史原因,MySQL复制基于逻辑的二进制日志,而非重做日志。多次被问到何时MySQL能支持基于物理的复制,其实这就看MySQL各位大佬的想法。上次和赖老师脑暴,倏地说道:MySQL会不会来个基于Paxos的redo复制? 由于历史原因,MySQL复制基于逻辑的二进制日志,而非重做日志。多次被问到 ...
分类:
数据库 时间:
2019-06-13 00:30:05
阅读次数:
112
大集群的场景下创建pool失败解决方法: ceph tell mon.* injectargs '--paxos_osdmap_propose_interval=1' ...
分类:
其他好文 时间:
2019-06-06 21:25:40
阅读次数:
160
https://www.cnblogs.com/7758521gorden/p/8006983.html zookeeper中的QuorumPeerMain解析 在一个初级的hadoop与zookeeper集群中,当集群搭建成功后,你jps查看进程的时候,其他的进程都是比较熟悉的,比如: 但是对于z ...
分类:
其他好文 时间:
2019-06-01 21:10:53
阅读次数:
108
1.HDFS-HA架构原理介绍 hadoop2.x之后,Clouera提出了QJM/Qurom Journal Manager,这是一个基于Paxos算法实现的HDFS HA方案,它给出了一种较好的解决思路和方案,示意图如下: 1)基本原理就是用2N+1台 JN 存储EditLog,每次写数据操作有 ...
分类:
其他好文 时间:
2019-05-26 16:12:40
阅读次数:
128
这篇博客针对最近的面试,把需要提高的知识点汇总一下,争取不断提高吧。希望今年能面到理想的公司。 挖财电话面:欠缺技术点 zk的原理paxos协议的原理、 map的容量大小、如何调整、什么时候调整 消息队列的强一致性如何保证、CAP 数据库的强一致性如何保证 爱库存现场面试:基本无难点面试官跟我差不多 ...
分类:
其他好文 时间:
2019-05-15 12:37:30
阅读次数:
146
Basic-Paxos算法(可以先看后面的实际例子再看前面的具体介绍部分) Paxos算法的目的 Paxos算法的目的是为了解决分布式环境下一致性的问题。 多个节点并发操纵数据,如何保证在读写过程中数据的一致性,并且解决方案要能适应分布式环境下的不可靠性(系统如何就一个值达到统一) Paxos的两个 ...
分类:
其他好文 时间:
2019-04-28 17:06:38
阅读次数:
136
近来newsql大热,尤以TIDB最火,pingcap不断打磨TiDB,现如今版本已经迭代到3.0,产品已经基本趋于成熟。对于TiDB,整体架构图如下图所示是由四个模块组成,TiDBServer,PDServer,TiKVServer,TiSpark。TiDBServer负责接受SQL请求,处理SQL的相关逻辑,并通过PD找到存储计算所需数据的TiKV地址,与TiKV交互获取数据,最终返回结果。T
分类:
数据库 时间:
2019-04-11 11:52:21
阅读次数:
209
这是 "Zookeeper学习总结" 的系列文章。 在上一节的 "理论基础部分" 也提到,一个分布式系统往往是在可用性与一致性之间平衡。大多都是在保证一致性的前提下,尽可能地提高系统的整体可用性。常见的有二阶段提交(2PC)、三阶段提交(3PC)、Paxos、Raft等算法,在本文将介绍他们中的一部 ...
分类:
其他好文 时间:
2019-04-07 13:04:04
阅读次数:
159