典型问题之一：Elasticsearch集群的磁盘被打爆 造成磁盘被打爆有以下几种原因： 索引泛滥，索引接入无流程管控； 索引无生命周期管理； 索引分片数量不合理，单分片过大； 日志类索引未按天等细粒度划分，单索引过大； 多集群复用同一服务器节点； 磁盘容量大小不一。 这些问题比较基础，其实也反映出 ...
分类：
其他好文 时间：
2021-05-24 12:58:48
阅读次数：
0
1.基本信息：主库:master主机IP:10.16.2.17master主机名：mvxl0782binlog目录：/data/mysql/logs数据文件目录：/data/mysql/data版本：8.0.22 从库：master主机IP:10.16.2.18master主机名：mvxl0783b ...
分类：
数据库 时间：
2021-05-24 08:10:16
阅读次数：
0
###1.理解读写分离 面对日益增加的系统访问量，数据库的吞吐量面临着巨大瓶颈。 对于同一时刻有大量并发读操作和较少写操作类型的应用系统来说，将数据库拆分为主库和从库，主库负责处理事务性的增删改操作，从库负责处理查询操作，能够有效的避免由数据更新导致的行锁，使得整个系统的查询性能得到极大的改善。 通 ...
分类：
数据库 时间：
2021-05-24 07:40:17
阅读次数：
0
读写分离负载均衡/集群消息队列Redis分布式缓存：本地缓存 分布式缓存分库分表 解决高并发的方法1.水平扩展：多来几台服务器2.垂直扩展 ：立杆见影,但是有上限3.分布式：就是一台服务器 的事儿分成多台服务器协作完成集群：一台服务器做的事请，现在由多台服务器共同承载,每台服务器都是独立完成的集群— ...
分类：
其他好文 时间：
2021-05-24 05:16:23
阅读次数：
0
一、实验背景 canal有一个参数canal.instance.standby.address可以指定源端数据库的从库为备选数据库，当源端master宕机后，canal仍能指向备库进行同步。 但是发现canal 1.1.4不兼容mariadb的gtid： 当canal instance里指定了gti ...
分类：
数据库 时间：
2021-04-28 11:41:01
阅读次数：
0
1 Could not execute Write_rows event on table cs3.test01； Duplicate entry ‘7‘ for key ‘test01.PRIMARY‘ 1.1 主库操作 SHOW BINARY LOGS; PURGE BINARY LOGS TO ...
分类：
数据库 时间：
2021-04-27 14:28:23
阅读次数：
0
主从同步 单节点的 MySQL 肯定不适用于高并发的生产环境，为了提高性能，我们至少要做到读写分离，主库可读可写，从库只读。这里最关键的技术点就是主从同步。 我的 MySQL 配置文件如下（8.0.22）： [mysqld] server_id = 1 # 机器ID，集群下唯一 pid-file = ...
分类：
数据库 时间：
2021-03-29 11:44:59
阅读次数：
0
1.change master to 时，ip port user password binlog position写入到master.info进行记录 2. start slave 时，从库会启动IO线程和SQL线程 3.IO_T，读取master.info信息，获取主库信息连接主库 4. 主库会 ...
分类：
数据库 时间：
2021-03-01 13:26:00
阅读次数：
0
Master最好不要做任何持久化工作，包括内存快照和AOF日志文件，特别是不要启用内存快照做持久化。 如果数据比较关键，某个Slave开启AOF备份数据，策略为每秒同步一次。 为了主从复制的速度和连接的稳定性，Slave和Master最好在同一个局域网内。 尽量避免在压力较大的主库上增加从库 Mas ...
分类：
其他好文 时间：
2021-01-29 12:10:57
阅读次数：
0
简介：mysql 实现主从复制的原理 通过主数据库binlog文件重做实现数据同步（尽量保证mysql版本相同） 1. 准备两台mysql服务 ip1：192.168.44.3 主服务器 ip2：192.168.44.5 从服务器 主服务器 2. 配置my.cnf vim /etc/my.conf ...
分类：
数据库 时间：
2021-01-14 10:34:48
阅读次数：
0
