在Redis中,与Sentinel(哨兵)实现的高可用相比,集群(cluster)更多的是强调数据的分片或者是节点的伸缩性,如果在集群的主节点上加入对应的从节点,集群还可以自动故障转移,因此相比Sentinel(哨兵)还是有不少优势的。以下简单测试Redis的集群(单机多实例的模式),来体验一下集群 ...
分类:
其他好文 时间:
2019-01-27 16:29:12
阅读次数:
192
一、MMM简介1、MMM(Master-MasterreplicationmanagerforMySQL,MySQL主主复制管理器)是一套支持双主故障切换和双主日常管理的脚本程序。2、MMM是一套灵活的脚本程序,基于perl实现,用来对mysqlreplication进行监控和故障转移,并能管理MySQLMaster-Master复制的配置。3、关于MMM高可用架构的说明如下:(1)mmm-mon
分类:
数据库 时间:
2019-01-25 12:55:57
阅读次数:
249
1. Kafka概要设计 kafka在设计之初就需要考虑以下4个方面的问题: 吞吐量/延时 消息持久化 负载均衡和故障转移 伸缩性 1.1 吞吐量/延时 对于任何一个消息引擎而言,吞吐量都是至关重要的性能指标。那么何为吞吐量呢?通常来说,吞吐量是某种处理能力的最大值。而对于Kafka而言,它的吞吐量 ...
分类:
其他好文 时间:
2019-01-21 19:16:32
阅读次数:
197
一、关于MongoDB复制集1、什么是复制集复制集是额外的数据副本,是跨多个服务器同步数据的过程,复制集提供了冗余并增加了数据可用性,通过复制集可以对硬件故障和中断的服务进行恢复。复制集的优势如下:?让数据更安全?搞数据可用性(724)?灾难恢复?无停机维护(如备份、索引重建、故障转移)?读缩放(额外的副本读取)?副本集对应用程序是透明的2、复制集的工作原理MongoDB的复制集至少需要两个节点。
分类:
数据库 时间:
2019-01-21 17:12:04
阅读次数:
176
原文:redis 系列26 Cluster高可用 (1)一.概述 Redis集群提供了分布式数据库方案,集群通过分片来进行数据共享,并提供复制和故障转移功能。在大数据量方面的高可用方案,cluster集群比Sentinel有优势。但Redis集群并不支持处理多个keys的命令,因为这需要在不同的节点... ...
分类:
其他好文 时间:
2019-01-07 00:17:51
阅读次数:
225
原文:redis 系列24 哨兵Sentinel (中)四. 检测下线状态 对于Redis的Sentinel中关于下线有两个不同的概念:(1)主观下线(Subjectively Down, 简称 Sdown) 指的是单个 Sentinel 实例对服务器做出的下线判断,此时不会进行故障转移。(2) 客... ...
分类:
其他好文 时间:
2019-01-06 23:05:05
阅读次数:
325
最近几次比较郁闷,碰到几起服务器硬件故障或者存储故障,直接导致服务器系统夯住,MySQL服务或多或少受到影响,有的影响是MySQL服务自动重启,有的影响是整个Linux系统重启的,这种硬件错误发生在6的系统居多。通常我们以为MySQL服务使用了高可用架构,类似于MMM/MHA这种能实现故障转移的架构 ...
分类:
其他好文 时间:
2019-01-06 20:45:11
阅读次数:
224
Consumer的非线程安全 Kafka只保证消息不漏,即at lease once,而不保证消息不重。关键点:假如consumer挂了重启,那它将从committed offset位置(告诉server的消费的位置点)开始重新消费,而不是consume offset位置(真正的消费位置点)。这也就 ...
分类:
编程语言 时间:
2019-01-02 23:30:14
阅读次数:
575
一:介绍 (1)日志采集系统 (2)是一种分布式,可靠且可用的服务,用于有效地收集,聚合和移动大量日志数据。 (3)具有基于流数据流的简单灵活的架构。 (4)具有可靠的可靠性机制和许多故障转移和恢复机制,具有强大的容错能力。 二:flume的三个组件:【Source,Channel,Sink】构成A ...
分类:
Web程序 时间:
2018-12-31 13:51:24
阅读次数:
211
云计算时代的高可用数据库是可扩展、容错且与任何私有云或公共云兼容的数据库实例。它们旨在提供业务连续性,而不会因任何类型的硬件或网络故障而导致用户体验的影响。其核心设计原则是消除任何单点故障,并提供平稳的故障转移体验。 公共云和私有云使企业能够摆脱容易出错的传统架构,并运行具有可靠性为5个9和6个9的 ...
分类:
数据库 时间:
2018-12-28 11:36:55
阅读次数:
236