一、ZooKeeper 的实现 1.1 ZooKeeper处理单点故障 我们知道可以通过ZooKeeper对分布式系统进行Master选举,来解决分布式系统的单点故障,如图所示。 那么我们继续分析一下,ZooKeeper通过Master选举来帮助分布式系统解决单点故障, 保证该系统中每时每刻只有一个 ...
分类:
其他好文 时间:
2018-09-30 16:51:11
阅读次数:
186
为什么要使用Nsq 最近一直在寻找一个高性能,高可用的消息队列做内部服务之间的通讯。一开始想到用zeromq,但在查找资料的过程中,意外的发现了Nsq这个由golang开发的消息队列,毕竟是golang原汁原味的东西,功能齐全,关键是性能还不错。其中支持动态拓展,消除单点故障等特性, 都可以很好的满 ...
分类:
其他好文 时间:
2018-09-29 15:24:35
阅读次数:
233
hadoop2.0介绍 hadoop2.0 功能: HDFS:hadoop的分布式文件系统 运行架构:主从架构 主:namenode 一个 >管理 为解决单点故障添加助理 助理:secondarynamenode >帮助namenode备份数据 但是接替不了namenode的工作 从:datanod ...
分类:
其他好文 时间:
2018-09-28 12:37:29
阅读次数:
171
一句话总结:使用官方Mysql Innodb Cluster集群方案实现Mysql冗余备份,无单点故障的高可用性。 项目背景: 腾讯数据中心网络的SDN控制器,项目业务对数据的要求如下: 1、对数据可用性要求高,要求多节点冗余备份,Mysql单点故障后可以切换到其他节点 2、对数据准确性要求高,对M ...
分类:
数据库 时间:
2018-09-24 16:45:37
阅读次数:
192
一、为何选择云计算(云计算之前遇到的问题) 1、有效解决硬件单点故障问题 单点故障是指某个硬件的故障造成网站某个服务的中断。要真正解决这个问题,需要为每个硬件准备冗余,这不仅大大增加了硬件购置成本,而且部署与维护成本也不容小视。 而云计算平台是基于服务器集群,从设计之初就考虑了单点故障问题,并在建设 ...
分类:
其他好文 时间:
2018-09-18 00:21:30
阅读次数:
217
搭建之前先了解一下MongoDB分片群集主要有如下三个组件: Shard:分片服务器,用于存储实际的数据块,实际生产环境中一个shard server 角色可以由几台服务器组成一个Peplica Set 承担,防止主机单点故障。 Config Server:配置服务器,存储了整个分片群集的配置信息, ...
分类:
数据库 时间:
2018-09-15 12:20:02
阅读次数:
247
分布式(Distributed)数据访问层(Data Access Layer),简称DAL,是利用MySQL Proxy、Memcached、集群等技术优点而构建的一个架构系统。主要目的是解决高并发、大数据流操作遇到的和数据访问有关的问题,例如怎么进行切库分表,怎样能够更好的防止服务单点故障等等。 ...
分类:
其他好文 时间:
2018-09-12 22:59:15
阅读次数:
257
keepalived介绍keepalived通过提供一个浮动的VIP(vrrp虚拟路由协议),防止单点故障导致业务无法访问,这样可以实现一个简单的双热备高可用功能keepalived有三种监听模式layer3、4、5,分别工作在TCP/IP、TCP及应用层下layer3工作时,会定期向服务器群集中发送一个ICMP的数据包(即ping),如果某台服务器没有响应数据包请求时,keepalived则会视
分类:
其他好文 时间:
2018-09-06 16:19:54
阅读次数:
147
集群介绍keepalived介绍用keepalived配置高可用集群keepalived他需要包含一个服务,比如这个服务用来实现高可用,最早讲述集群的时候一个角色可能存在单点故障,如果这个服务当机就有问题了,现在想让这个服务高可用就得用一个keepalived或者heartbeat等高可用的软件,让他实现高可用搭建了高可用的集群首先要有个keepalived的服务然后还要有让那个服务去实现高可用,
分类:
其他好文 时间:
2018-09-06 11:03:17
阅读次数:
157
一面: 1.讲一下索引文件同步这项工作? 1.1随机选定一台机器执行定时任务时,如何避免单点故障? 1.2选定机器是先构建索引再更新本地索引文件还是边构建边更新? 1.3当选定的机器构建新索引后没有上传oss,有处理方式吗?(其他机器没办法更新索引文件了) 1.4其他机器从oss下载索引文件时的更新 ...
分类:
其他好文 时间:
2018-09-05 17:45:39
阅读次数:
176