HA概述所谓HA(HighAvailable),即高可用(7*24小时不中断服务)实现高可用最关键的策略是消除单点故障,HA严格来说应该分成各个组件的HA机制:HDFS的HA和YARN的HAHadoop2.0之前,在HDFS集群中NameNode存在单点故障(SPOF)NameNode主要在以下两个方面影响HDFS集群NameNode机器发生意外,如宕机,集群将无法使用,直到管理员重启NameNo
分类:
其他好文 时间:
2019-09-09 00:01:51
阅读次数:
119
下图是HDFS的架构: 从上图中可以知道,HDFS包含了NameNode、DataNode以及Client三个角色,当我们的HDFS没有配置HA的时候,那还有一个角色就是SecondaryNameNode,这四个角色都是基于JVM之上的Java进程。既然是Java进程,那我们肯定可以调整这四个角色使 ...
分类:
其他好文 时间:
2019-09-08 20:20:22
阅读次数:
444
虚拟化 虚拟化技术产品 KVM VMware IBM 服务器虚拟化(服务器、存储、系统、网络、软件、桌面) VMware 高可用性(HA) VM系统启动时间+应用启动时间+15秒左右的心跳检测时间。 VMware分布式资源调度(DRS) 虚拟化的优势 虚拟化可以提高 IT 敏捷性、灵活性和可扩展性, ...
分类:
其他好文 时间:
2019-09-04 00:12:47
阅读次数:
142
springmvc的执行流程前端控制器继承自servlet方法我们在dispatcherServlet里找到doService方法进入: this.doDispatch(request, response); 里面是定义一些参数,主要的是: mv = ha.handle(processedReque ...
分类:
编程语言 时间:
2019-09-01 12:48:27
阅读次数:
90
参考: hue的load balance官网: https://www.cloudera.com/documentation/enterprise/6/6.2/topics/hue_use_add_lb.html HA: https://www.cloudera.com/documentation/ ...
分类:
其他好文 时间:
2019-08-31 21:42:19
阅读次数:
153
继续上篇文章解决RabbitMQ消息丢失问题和保证消息可靠性(一) 未完成部分,我们聊聊MQ Server端的高可用和消费端如何保证消息不丢的问题? 回归上篇的内容,我们知道消息从生产端到服务端,为了保证消息不丢,我们必须做哪些事情? 发送端采用Confirm模式,注意Server端没成功通知发送端 ...
分类:
其他好文 时间:
2019-08-31 01:16:47
阅读次数:
211
[TJOI2013]拯救小矮人 nlogn贪心Hack征集 考试的时候忘记了DP,乱搞了一个贪心。DP是枚举每一个人选或不选,而贪心是先排序,然后能走就走,不能走就找一个(已经走了的或当前这个)最大的垫在下面。详细见代码。求一组hack数据,已经和正解大数据小数据拍了过百万组,和机房大佬手动思考ha ...
分类:
其他好文 时间:
2019-08-30 22:31:12
阅读次数:
61
这里有几个关于重心,垂心的定理,我将其称作Aladdin Sane定理:$→GA+→GB+→GC=→0(1)$; $→HA·→HB=→HB·→HC=→HA·→HC(2)$; $GA=2GZ(3)$; 其中$G$是重心,$Z$是$BC$的中点,$P$是任意点,自然也可以是垂心。这几个定理可以大大减少计 ...
分类:
其他好文 时间:
2019-08-30 21:10:50
阅读次数:
228
MHA(Master HA)是一款开源的MySQL的高可用程序,它为MySQL主从复制架构提供了automating master failover 功能。MHA在监控到master节点故障时,会提升其中拥有最新数据的slave节点成为新的master节点,在此期间,MHA会通过与其它从节点获取额外 ...
分类:
数据库 时间:
2019-08-29 23:49:19
阅读次数:
197
大数据学习路线分享Hadoop阶段的高可用配置,什么是Hadoop的HA机制 Ha机制即Hadoop的高可用(7*24小时不中断服务) 正式引入HA机制是从hadoop2.0开始,之前的版本中没有HA机制 hadoop-ha严格来说应该分成各个组件的HA机制——HDFS的HA、YARN的HAHDFS的HA机制详解HDFS的HA主要是通过双namenode协调工作实现双namenode协调
分类:
其他好文 时间:
2019-08-28 23:57:40
阅读次数:
186