Centos7.5基于MySQL5.7的InnoDB Cluster多节点集群环境部署一.MySQL InnoDB Cluster 介绍MySQL的高可用架构解决方案,比如MMM, MHA, NDB Cluster, Galera Cluster, InnoDB Cluster, 腾讯的PhxSQL ...
分类:
数据库 时间:
2020-06-18 19:57:24
阅读次数:
94
MySQL高可用架构应该考虑什么?你认为应该如何设计? 一、MySQL高可用架构应该考虑什么? 1、对业务的了解,需要考虑业务对数据库一致性要求的敏感程度,切换过程中是否有事务会丢失。 2、对于基础设施的了解,需要了解基础设施的高可用的架构。例如 单网线,单电源等情况。 3、对于数据库故障时间掌握, ...
分类:
数据库 时间:
2020-06-18 19:51:46
阅读次数:
52
如果不了解 MongoDB Sharded Cluster 原理,请先阅读 MongoDB Sharded cluster架构原理 关于MongoDB Sharding,你应该知道的 关于 sharding 迁移,会分3个部分来介绍,本文为第三部分 负载均衡及迁移策略 chunk 迁移流程 Bala ...
分类:
数据库 时间:
2020-06-18 12:43:23
阅读次数:
96
一、什么是负载均衡? 负载,从字面意思可以分析,是指后端server可以承受的压力。这个一方面是服务器的性能,另一方面就是代码的质量了。 均衡,就是说把服务部署在多态server,如何调度这些资源。根据服务器性能不同,进行一个权衡。 当web访问量增加,服务器性能不同,更好的去利用服务器,我们需要负 ...
分类:
其他好文 时间:
2020-06-18 12:40:54
阅读次数:
42
哨兵作用 哨兵(sentinel) 是一个分布式系统,是程序高可用性的一个保障。用于监视任意多个主服务器,以及这些主服务器属下的所有从服务器,当出现故障时通过投票机制选择新的master并将所有slave连接到新的master。 监控 不断地检查master和slave是否正常运行 master存活 ...
分类:
其他好文 时间:
2020-06-18 09:13:33
阅读次数:
47
说明 在前面讲模型加载和保存的时候,在多GPU情况下,实际上是挖了坑的,比如在多GPU加载时,GPU的利用率是不均衡的,而当时没详细探讨这个问题,今天来详细地讨论一下。 问题 在训练的时候,如果GPU资源有限,而数据量和模型大小较大,那么在单GPU上运行就会极其慢的训练速度,此时就要使用多GPU进行 ...
分类:
其他好文 时间:
2020-06-18 01:42:18
阅读次数:
81
##主从复制介绍 在分布式系统中为了解决单点问题,通常会把数据复制多个副本到其他机器,满足故障恢复和负载均衡等求. Redis 也是如此,提供了复制功能. 复制功能是高可用 Redis 的基础,后面的哨兵和集群都是在复制的基础上实现高可用的. 每个从节点只能有一个主节点,主节点可以有多个从节点. # ...
分类:
其他好文 时间:
2020-06-17 19:50:25
阅读次数:
58
Nova集成Ceph 1. 配置ceph.conf # 如果需要从ceph rbd中启动虚拟机,必须将ceph配置为nova的临时后端; # 推荐在计算节点的配置文件中启用rbd cache功能; # 为了便于故障排查,配置admin socket参数,这样每个使用ceph rbd的虚拟机都有1个s ...
分类:
其他好文 时间:
2020-06-17 18:07:04
阅读次数:
53
分布式消息系统作为实现分布式系统可扩展、可伸缩性的关键组件,需要具有高吞吐量、高可用等特点。而谈到消息系统的设计,就回避不了两个问题: 消息的顺序问题 消息的重复问题 RocketMQ作为阿里开源的一款高性能、高吞吐量的消息中间件,它是怎样来解决这两个问题的?RocketMQ有哪些关键特性?其实现原 ...
分类:
其他好文 时间:
2020-06-17 16:51:40
阅读次数:
53
今天部署项目到阿里云服务器成功 第一步肯定就是生成jar包辣 进行上传到linux服务器 第二步进行运行jar包 (在此之前 mysql等基础必要的东西都得安装) 表示启动jar包后台运行 日志输出到 logs里面 java -jar 你的jar包名称 >logs.out & 使用 jps 查看运行 ...
分类:
其他好文 时间:
2020-06-17 16:41:30
阅读次数:
53