背景说明公司的整个电商系统搭建在华为云上，根据老总的估计，上线3个月之后日订单量会达到百万级别，保守估计3个月之后总订单个数预计会有5千万。MySQL单表达到千万级别，就会出现明显的性能问题。根据如此规模的数据，当时考虑了2套解决方案：方案一在业务上根据用户ID做拆分，将数据打散放在5台32U128G的华为云RDS上边方案二直接使用华为云的分布式数据库中间件DDM方案一的好处是，分片算法全部在业务
分类：
数据库 时间：
2020-12-14 13:58:12
阅读次数：
15
ES集群下线节点扩容，然后在上线 1、将节点从集群路由策略中排除 PUT _cluster/settings { "transient" : { "cluster.routing.allocation.exclude._name" : "node-1" } } 2、等待节点上分片全部被迁移 3、下线 ...
分类：
其他好文 时间：
2020-12-14 13:34:02
阅读次数：
4
本文将继续介绍elasticsearch索引监控之Indicessegments与IndicesShardstoresapi。IndicesSegments提供Lucene索引(分片级别)使用的segments(段信息)。其对应的示例代码如下：1publicstaticfinalvoidtest_Indices_segments(){2TransportClientclient=EsClient.
preference查询选择副本分片的倾向性(即在一个复制组中选择副本的分片值。默认情况下，es以未指定的顺序从可用的碎片副本中进行选择，副本之间的路由将在集群章节更加详细的介绍。可以通过该字段指定分片倾向与选择哪个副本。preference可选值：_primary只在节点上执行，在6.1.0版本后废弃，将在7.x版本移除。_primary_first优先在主节点上执行。在6.1.0版本后废弃，将
1、环境规划3台机，每台机5个实例，分别mongos1个，configserver1个，shardserver3个IP:192.168.56.107(mongodb01)实例:mongos:30000shard1:40001(主节点)shard2:40002(仲裁节点)shard3:40003(副节点)config:27027IP:192.168.56.105(mongodb02)实例:mongo
分类：
数据库 时间：
2020-12-08 12:21:00
阅读次数：
8
消息组接到某项目组反馈，topic在扩容后出现部分队列无法被消费者，导致消息积压，影响线上业务？考虑到该问题是发送在真实的线上环境，为了避免泄密，本文先在的虚拟机中来重现问题。1、案情回顾1.1集群现状集群信息如下：例如业务主体名topic_dw_test_by_order_01的路由信息如图所示：当前的消费者信息：broker的配置信息如下：brokerClusterName=DefaultCl
分类：
其他好文 时间：
2020-12-07 12:44:57
阅读次数：
13
分片+高可用+负载均衡 其中一个挂了，备用的顶上 redis集群 启动6个容器 创建redis集群网卡 docker network create redis --subnet 172.38.0.0/16 查看redis网卡的详细信息 docker network inspect redis 配置r ...
分类：
其他好文 时间：
2020-12-02 12:02:17
阅读次数：
3
一、集群模式 Redis集群是一个由多个主从（主从在Redis系列（四）：Redis持久化和主从复制原理中详细介绍，这里先有个概念 ）节点组成的高可用集群，它具有复制、高可用和分片等特性 二、集群部署 1、环境 3台主机分别是： 192.168.160.146 192.168.160.152 192 ...
分类：
其他好文 时间：
2020-11-23 12:23:27
阅读次数：
5
第一点：Java代码实现文件上传 FormFile file = manform.getFile(); String newfileName = null; String newpathname = null; String fileAddre = "/numUp"; try { InputStre ...
分类：
Web程序 时间：
2020-11-23 12:10:00
阅读次数：
15
mongogdb备份 全量备份命令 mongodump -h IP:路由端口 -d 数据库名称 -u 用户 -p 密码 -o D:\DataBackup 增量备份 连接主分片的路由和数据库，查看分片节点的状态 格式： mongo 主分片IP:路由端口/备份的数据库名称 -u 用户 -p 密码 查看节 ...
