一、前提条件 安装了Zookeeper、Hadoop HDFS HA 二、安装Mysql 因为使用量多的是单用户数据库模式，并且数据库使用最多的是mysql 所以在这里选择mysql数据库； 三、Hive安装 启动hive 如果能正常的显示登录到hive的命令行下，就表示安装成功了； ...
分类：
数据库 时间：
2019-09-11 23:57:51
阅读次数：
191
一、环境准备1.集群规划主机名IP角色VIP20.0.20.200master-VIPk8s-master0120.0.20.201masterk8s-master0220.0.20.202masterk8s-master0320.0.20.203masterk8s-node0120.0.20.204nodek8s-node0220.0.20.205nodek8s-node0320.0.20.20
分类：
其他好文 时间：
2019-09-10 09:15:32
阅读次数：
125
HA概述所谓HA（HighAvailable），即高可用（7*24小时不中断服务）实现高可用最关键的策略是消除单点故障，HA严格来说应该分成各个组件的HA机制：HDFS的HA和YARN的HAHadoop2.0之前，在HDFS集群中NameNode存在单点故障（SPOF）NameNode主要在以下两个方面影响HDFS集群NameNode机器发生意外，如宕机，集群将无法使用，直到管理员重启NameNo
分类：
其他好文 时间：
2019-09-09 00:01:51
阅读次数：
119
下图是HDFS的架构： 从上图中可以知道，HDFS包含了NameNode、DataNode以及Client三个角色，当我们的HDFS没有配置HA的时候，那还有一个角色就是SecondaryNameNode，这四个角色都是基于JVM之上的Java进程。既然是Java进程，那我们肯定可以调整这四个角色使 ...
分类：
其他好文 时间：
2019-09-08 20:20:22
阅读次数：
444
虚拟化 虚拟化技术产品 KVM VMware IBM 服务器虚拟化（服务器、存储、系统、网络、软件、桌面） VMware 高可用性（HA） VM系统启动时间+应用启动时间+15秒左右的心跳检测时间。 VMware分布式资源调度（DRS） 虚拟化的优势 虚拟化可以提高 IT 敏捷性、灵活性和可扩展性， ...
分类：
其他好文 时间：
2019-09-04 00:12:47
阅读次数：
142
ApplicationMaster管理部分主要由三个服务构成，分别是ApplicationMasterLauncher、AMLivelinessMonitor和ApplicationMasterService，它们共同管理应用程序的ApplicationMaster的生命周期 Application ...
分类：
移动开发 时间：
2019-09-03 16:32:36
阅读次数：
138
springmvc的执行流程前端控制器继承自servlet方法我们在dispatcherServlet里找到doService方法进入： this.doDispatch(request, response); 里面是定义一些参数，主要的是： mv = ha.handle(processedReque ...
分类：
编程语言 时间：
2019-09-01 12:48:27
阅读次数：
90
参考: hue的load balance官网: https://www.cloudera.com/documentation/enterprise/6/6.2/topics/hue_use_add_lb.html HA: https://www.cloudera.com/documentation/ ...
分类：
其他好文 时间：
2019-08-31 21:42:19
阅读次数：
153
继续上篇文章解决RabbitMQ消息丢失问题和保证消息可靠性（一） 未完成部分，我们聊聊MQ Server端的高可用和消费端如何保证消息不丢的问题？ 回归上篇的内容，我们知道消息从生产端到服务端，为了保证消息不丢，我们必须做哪些事情？ 发送端采用Confirm模式，注意Server端没成功通知发送端 ...
分类：
其他好文 时间：
2019-08-31 01:16:47
阅读次数：
211
[TJOI2013]拯救小矮人 nlogn贪心Hack征集 考试的时候忘记了DP，乱搞了一个贪心。DP是枚举每一个人选或不选，而贪心是先排序，然后能走就走，不能走就找一个（已经走了的或当前这个）最大的垫在下面。详细见代码。求一组hack数据，已经和正解大数据小数据拍了过百万组，和机房大佬手动思考ha ...
分类：
其他好文 时间：
2019-08-30 22:31:12
阅读次数：
61
