（1）本周做了什么，花在学习上多长时间，花在代码时间上多长时间，花在解决问题用了多长时间。 学习了Linux环境安装，Hadoop本地模式安装及伪分布式模式安装 学习：2天 代码：1天 解决问题：半天 （2）下周准备做什么？ 学习Hadoop相关知识 （3）本周遇到的问题？ 安装好后，web查看ha ...
分类：
其他好文 时间：
2018-09-01 14:36:25
阅读次数：
132
什么是高可用高可用HA（High Availability）是分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计减少系统不能提供服务的时间。 常见互联网分布式架构如上，分为：（1）客户端层：典型调用方是浏览器browser或者手机应用APP （2）反向代理层：系统入口，反向代理 （3）站点 ...
分类：
其他好文 时间：
2018-08-30 16:53:45
阅读次数：
173
HDFS HA高可用 1 HA概述 1）所谓HA（high available），即高可用（7*24小时不中断服务）。 2）实现高可用最关键的策略是消除单点故障。HA严格来说应该分成各个组件的HA机制：HDFS的HA和YARN的HA。 3）Hadoop2.0之前，在HDFS集群中NameNode存在 ...
分类：
其他好文 时间：
2018-08-29 13:56:07
阅读次数：
132
https://issues.apache.org/jira/browse/FLINK-10030 https://issues.apache.org/jira/browse/FLINK-10011 https://github.com/apache/flink/pull/6590/commits/ ...
分类：
其他好文 时间：
2018-08-28 17:03:10
阅读次数：
171
嘟嘟嘟 当看到n <= 50 的时候就乐呵了，暴力就行了，不过最暴力的方法是O(n7)……然后加一个二分边长达到O(n6logn)，然后我们接着优化，把暴力比对改成O(1)的比对hash值，能达到O(n5logn),到勉强能过……不过我们还可以在优化一下，把第一个矩阵中所有边长为 l 的子矩阵的ha ...
分类：
Web程序 时间：
2018-08-28 17:02:24
阅读次数：
203
## 使用QJM实现HDFS的HA配置### 1、背景hadoop 2.0.0之前，namenode存在单点故障问题（SPOF，single point of failure），如果主机或进程不可用时，整个集群就变得不可用，直到namenode进行重启或产生新的namenode。主要有两种方式会影响... ...
分类：
其他好文 时间：
2018-08-27 21:53:52
阅读次数：
160
1、概念：Eureka 服务发现框架 2、具体内容 对于服务发现框架可以简单的理解为服务的注册以及使用操作步骤，例如：在 ZooKeeper 组件，这个组件里面已经明确的描述了一个服务的注册以及发现操作流程，在整个 Rest 架构里面，会存在有大量的微服务的信息。 在 SpringCloud 之中使 ...
分类：
编程语言 时间：
2018-08-27 14:53:06
阅读次数：
217
参考文档:https://github.com/opsnull/follow-me-install-kubernetes-cluster感谢作者的无私分享。集群环境已搭建成功跑起来。文章是部署过程中遇到的错误和详细操作步骤记录。如有需要对比参考，请按照顺序阅读和测试。kubernetesmaster节点运行如下组件：kube-apiserverkube-schedulerkube-controll
Set集合 1.概述 Collection list集合:有序(存储和取出的顺序一致),可重复. Set集合:无序(存储顺序和取出不一致)，唯一 2.HashSet (1).概述:HashSet不保证set的迭代顺序，作为继承父类接口的Set()的实现方法，其中的元素具有唯一性。 (2).为什么Ha ...
分类：
编程语言 时间：
2018-08-26 18:14:01
阅读次数：
166
zabbix监控 1.1 为什么要监控 在需要的时刻，提前提醒我们服务器出问题了 当出问题之后，可以找到问题的根源 网站/服务器 的可用性 1.1.1 网站可用性 在软件系统的高可靠性（也称为可用性，英文描述为HA，High Available）里有个衡量其可靠性的标准——X个9，这个X是代表数字3 ...
分类：
其他好文 时间：
2018-08-25 20:03:50
阅读次数：
242
