分布式集群搭建：http://blog.51cto.com/14048416/2327802?上面试spark普通的分布式集群搭建，存在master节点的单点故障问题。Hadoop2.x开始，已经使用zookeeper解决了单点故障。同样的策略，spark也利用了zookeeper解决了spark集群的单点故障问题。1.集群的规划（这里使用3台机器测试）2.具体搭建步骤：①如果已经使用，
分类：
其他好文 时间：
2019-01-02 12:28:31
阅读次数：
232
之前详细介绍了haproxy的基础知识点, 下面记录下Haproxy+Heartbeat高可用web集群方案实现过程, 以加深理解. 架构草图如下: 1) 基本环境准备 (centos6.9系统) 2) 安装后端两个realserver节点的web环境 (即172.16.60.204/205两台机器 ...
分类：
其他好文 时间：
2019-01-02 10:46:26
阅读次数：
235
一.Redis基本认知 1.含义： REmote DIctionary Server(Redis) | 是一个key-value存储系统 2.特性： 2.1 持久化：可以将内存中的数据保存在磁盘中，重启的时候可以再次加载进行使用； 2.2 支持丰富的数据类型，如：Strings, Lists, Ha ...
分类：
Web程序 时间：
2019-01-01 17:14:45
阅读次数：
614
1.kafka的HA（1）zookeeper在kafka中的作用： -Zookeeper帮助kafka集群运行：存储一些元数据，还会帮助kafka集群进行管理（选主） -存储关于消费者消费了哪些topic到那个进度的数据。 （2）kafkaHA解决的问题： 存在的问题：kafka在0.8以前的版本中，并不提供highava
分类：
其他好文 时间：
2018-12-30 23:24:12
阅读次数：
321
slave_net_timeout slave_net_timeout表示slave在slave_net_timeout时间之内没有收到master的任何数据(包括binlog，heartbeat)，slave认为连接断开，会进行重连。 超时后，立刻重连，后续重连的时间间隔由 CHANGE MAST ...
分类：
数据库 时间：
2018-12-30 20:39:22
阅读次数：
251
（使用newScheduledThreadPool来模拟心跳机制） 1 public class HeartBeat { 2 public static void main(String[] args) { 3 ScheduledExecutorService executor = Executor ...
分类：
其他好文 时间：
2018-12-30 02:40:38
阅读次数：
179
系统开发中，数据库是非常重要的一个点。除了程序的本身的优化，如：SQL语句优化、代码优化，数据库的处理本身优化也是非常重要的。主从、热备、分表分库等都是系统发展迟早会遇到的技术问题问题。Mycat是一个广受好评的数据库中间件，已经在很多产品上进行使用了。希望通过这篇文章的介绍，能学会Mycat的使用 ...
分类：
数据库 时间：
2018-12-28 18:31:46
阅读次数：
216
需要开启FEDERATED存储引擎SHOWVARIABLESLIKE‘%plugin%‘没有的话需要现下载放到文件夹下然后installpluginFEDERATEDsoname‘ha_federated.so‘;SHOWENGINES;CREATETABLEggss(idint(11)NOTNULLAUTO_INCREMENT,wfidvarchar(10)DEF
分类：
数据库 时间：
2018-12-28 16:41:24
阅读次数：
191
一 Heartbeat简介 1.1 概述 Heartbeat是Linux-HA项目中的一个组件，也是当前开源HA项目中最成功的一个例子，它提供了所有HA软件所需要的基本功能，如心跳检测和资源接管、监测群集中的系统服务、在群集中的节点间转移共享IP地址的所有者等。heartbeat最核心的功能包括两个 ...
分类：
其他好文 时间：
2018-12-27 22:59:11
阅读次数：
213
一、MYSQL索引类型（共三种） 1）、normal 正常 应用场景：普通的index 2）、unique 唯一性的 应用场景：比如身份证的 3）、full text 全文索引 应用场景：较长文字 二、MYSQL 索引办法（共2种） 1）、btree方法 使用范围：查询指定【范围】的数据 2）、ha ...
分类：
数据库 时间：
2018-12-25 11:22:25
阅读次数：
162
