redis5.0安装部署参考一键安装脚本1.目前在生产环境已经有的集群环境为3个master、3个slave,现在添加2个节点,形成5个master和5个slave将安装好的新redis节点添加到集群,安装好的节点规划如下:172.16.153.32:7002和172.16.153.32:7003前面的是master后面的是slave172.16.153.33:7004和172.16.153.33
                            
                            
                                分类:
其他好文   时间:
2020-12-08 12:22:25   
                                阅读次数:
4
                             
                         
                    
                        
                            
                            
                                1、环境规划3台机,每台机5个实例,分别mongos1个,configserver1个,shardserver3个IP:192.168.56.107(mongodb01)实例:mongos:30000shard1:40001(主节点)shard2:40002(仲裁节点)shard3:40003(副节点)config:27027IP:192.168.56.105(mongodb02)实例:mongo
                            
                            
                                分类:
数据库   时间:
2020-12-08 12:21:00   
                                阅读次数:
8
                             
                         
                    
                        
                            
                            
                                Kafka里面的信息是如何被消费的?摄影:产品经理跟着产品经理去苏州吃面作为一个爬虫工程师,Kafka对你而言就是一个消息队列,你只需要掌握如何向里面写入数据,以及如何读取数据就可以了。请谨记:使用Kafka很容易,但对Kafka集群进行搭建、维护与调优很麻烦。Kafka集群需要有专人来维护,不要以为你能轻易胜任这个工作。”本文,以及接下来的几篇针对Kafka的文章,我们面向的对象都是爬虫工程师或
                            
                            
                                分类:
其他好文   时间:
2020-12-08 12:03:19   
                                阅读次数:
3
                             
                         
                    
                        
                            
                            
                                1、背景公司一个RocketMQ集群由4主4从组成,突然其中3台服务器“竟然”在同一时间下线,其监控显示如下:依次查看三台机器的监控图形,时间戳几乎完美“吻合”,不可思议吧。2、故障分析出现问题,先二话不说,马上重启各服务器,尽快恢复集群,降低对业务的影响,接下来开始对日志进行分析。Java进程自动退出(rocketmq本身就是一个java进程),一种最常见的问题是由于内存溢出或由于内存泄漏导致进
                            
                            
                                分类:
系统相关   时间:
2020-12-07 12:49:05   
                                阅读次数:
15
                             
                         
                    
                        
                            
                            
                                消息组接到某项目组反馈,topic在扩容后出现部分队列无法被消费者,导致消息积压,影响线上业务?考虑到该问题是发送在真实的线上环境,为了避免泄密,本文先在的虚拟机中来重现问题。1、案情回顾1.1集群现状集群信息如下:例如业务主体名topic_dw_test_by_order_01的路由信息如图所示:当前的消费者信息:broker的配置信息如下:brokerClusterName=DefaultCl
                            
                            
                                分类:
其他好文   时间:
2020-12-07 12:44:57   
                                阅读次数:
13
                             
                         
                    
                        
                            
                            
                                
                    使用 Ribbon 实现客户端侧负载均衡 一、基本用法 一般如果导入 Eureka Client 服务的话,自动包含了 Ribbon,所以无需再次导入。 用法如下: 第一种:创建一个名为 RestTemplate 的 bean,并为其添加 @LoadBalanced 注解,使用该 RestTempl ...
                            
                            
                                分类:
其他好文   时间:
2020-12-07 12:35:22   
                                阅读次数:
5
                             
                         
                    
                        
                            
                            
                                1、问题描述 当我们使用 kubeadm join 命令将 Node 节点加入集群时,你会发现所有 kubectl 命令均不可用(呈现阻塞状态,并不会返回响应结果),我们可以在 Node 节点中通过 kubeadm reset 命令将 Node 节点下线,此时回到 Master 节点再使用 watc ...
                            
                            
                                分类:
其他好文   时间:
2020-12-05 10:57:01   
                                阅读次数:
9
                             
                         
                    
                        
                            
                            
                                SpringCloud分布式开发五大组件详解服务发现——Netflix Eureka 客服端负载均衡——Netflix Ribbon 断路器——Netflix Hystrix 服务网关——Netflix Zuul 分布式配置——Spring Cloud Config Eureka 一个RESTful ...
                            
                            
                                分类:
编程语言   时间:
2020-12-05 10:55:07   
                                阅读次数:
8
                             
                         
                    
                        
                            
                            
                                主从模式环境可以保障消息的即时性与可靠性投递一条消息后,关闭主节点从节点继续可以提供消费者数据进行消费,但是不能接收消息主节点上线后进行消费进度offset同步准备两台机器,一主一从:机器IPhostname角色192.168.243.169rocketmq01master192.168.243.170rocketmq02slave我这里事先在两台机器上安装好了RocketMQ,关于RocketM
                            
                            
                                分类:
其他好文   时间:
2020-12-05 10:54:50   
                                阅读次数:
10
                             
                         
                    
                        
                            
                            
                                
                    前言 在本机模拟器的ubuntu18版本上进行的部署测试,参考的官方文档: hadoop: 链接地址 hive: 链接地址 使用的版本: hadoop: 3.2.1 hive: 3.1.2 全程是使用root账号进行的配置。 hadoop安装配置 hadoop使用的是虚拟集群,即单机模拟集群,dat ...
                            
                            
                                分类:
其他好文   时间:
2020-12-05 10:52:38   
                                阅读次数:
7