1、关于主从复制的说明 持久化保证了即使redis服务重启也不会丢失数据，因为redis服务重启后会将硬盘上持久化的数据恢复到内存中，但是当redis服务器的硬盘损坏了可能会导致数据丢失，如果通过redis的主从复制机制就可以避免这种单点故障，如下图： 主redis中的数据有两个副本（replica ...
分类：
其他好文 时间：
2019-12-29 20:22:52
阅读次数：
63
hadoop存在的两个问题： 1.内存受限的问题 联邦解决内存受限问题。 建立多个NameNode，每个NameNode记录元数据的一部分，但是对于元数据整体来说本质上还是只有一份。 2.单点故障 HA（high available）高可用，解决hdfs的单点故障问题。 主备namenode，存储相 ...
分类：
其他好文 时间：
2019-12-26 21:28:33
阅读次数：
115
# 运维管理 ### 1 集群搭建#### 1.1 单Master模式这种方式风险较大，一旦Broker重启或者宕机时，会导致整个服务不可用。不建议线上环境使用,可以用于本地测试。##### 1）启动 NameServer```bash### 首先启动Name Server$ nohup sh mq ...
分类：
其他好文 时间：
2019-12-24 13:56:26
阅读次数：
80
上级回顾： ~~~ 实时同步: 实时同步实现原理: rsync delete 实时同步场景: 1.NFS单点故障 (不建议) Glusterfs FastDfs OSS 2.迁移 ( 静态资源 ) 应用场景例如CDN镜像、 网站数据备份、 网站搬家等等。 sersync怎么用? 二进制,解压即用 l ...
分类：
其他好文 时间：
2019-12-23 13:39:41
阅读次数：
98
[TOC] 实践 我自己是先学的网络，在网络里面就有一个协议，我们经常会用到，就是VRRP（虚拟网关冗余协议），后来学了运维之后才知道，keepalived也是通过这个协议实现的高可用。 它的应用范围比较广泛，我们这里是给负载均衡做双机热备，防止单点故障。 环境： | 负载均衡1 | 192.168 ...
分类：
其他好文 时间：
2019-12-22 20:31:36
阅读次数：
147
Redis集群1.为什么需要集群:? (1)解决单点故障? (2)处理高并发? (3)处理大数据(高并发) --解决存储问题集群方案的选择: (1)主从复制 (读写分离 主从同步)? 优点: ? 支持主从复制，主机会自动将数据同步到从机，可以进行读写分离? 缺点:? Redis不具备自动容错和恢复功 ...
分类：
其他好文 时间：
2019-12-20 20:09:19
阅读次数：
74
GlusterFS概述 GlusterFS系统是一个可扩展的网络文件系统，相比其他分布式文件系统，GlusterFS具有高扩展性、高可用性、高性能、可横向扩展等特点，并且其没有元数据服务器的设计，让整个服务没有单点故障的隐患。 文件存储通常支持POSIX接口（如glusterfs，但GFS、HDFS ...
分类：
其他好文 时间：
2019-12-17 10:30:36
阅读次数：
122
"聊聊分布式事务，再说说解决方案" "分布式事务CAP理解论证 解决方案" "分布式系统的2PC、3PC详细分析" "github tcc示例" "分布式事务、重复消费、顺序消费" 一、理论 CAP相关： CAP与BASE相关： "我的博客" 而对于分布式中的问题的解决方案,CAP原则出现,描述如下 ...
分类：
其他好文 时间：
2019-12-15 01:10:43
阅读次数：
98
1. 基本原理 2.x版本中，HDFS架构解决了单点故障问题，即引入双NameNode架构，同时借助共享存储系统来进行元数据的同步，共享存储系统类型一般有几类，如：Shared NAS+NFS、BookKeeper、BackupNode 和 Quorum Journal Manager(QJM)，上 ...
分类：
其他好文 时间：
2019-12-12 12:57:17
阅读次数：
87
在网上看了不少关于Kubernetes的视频，虽然现在还未用上，但是也是时候总结记录一下，父亲常教我的一句话：学到手的东西总有一天会有用！我也相信在将来的某一天会用到现在所学的技术。废话不多扯了。。。。 一、前期准备 1、k8s-master01：master主服务器（存在单点故障） 2、k8s-n ...
分类：
Web程序 时间：
2019-12-12 01:20:58
阅读次数：
358
