如题出现Namenode经常挂掉 IPC's epoch 9 is less than the last promised epoch 10， 解决方案 可以在core-site.xml文件中修改ha.health-monitor.rpc-timeout.ms参数值，来扩大zkfc监控检查超时时间。 ...
分类：
其他好文 时间：
2019-01-02 23:18:29
阅读次数：
869
公司要将监控数据存入opentsdb，而opentsdb使用了hbase作为存储。所以想搭建一套高可用的分布式存储来供opentsdb使用。 因为机器有限，所以测试过程中将三台集群的环境安装在docker上。 一：宿主机版本和docker版本 宿主机：Centos7.2 3.10.0-862.14. ...
分类：
其他好文 时间：
2019-01-02 19:27:50
阅读次数：
225
分布式集群搭建：http://blog.51cto.com/14048416/2327802?上面试spark普通的分布式集群搭建，存在master节点的单点故障问题。Hadoop2.x开始，已经使用zookeeper解决了单点故障。同样的策略，spark也利用了zookeeper解决了spark集群的单点故障问题。1.集群的规划（这里使用3台机器测试）2.具体搭建步骤：①如果已经使用，
分类：
其他好文 时间：
2019-01-02 12:28:31
阅读次数：
232
之前详细介绍了haproxy的基础知识点, 下面记录下Haproxy+Heartbeat高可用web集群方案实现过程, 以加深理解. 架构草图如下: 1) 基本环境准备 (centos6.9系统) 2) 安装后端两个realserver节点的web环境 (即172.16.60.204/205两台机器 ...
分类：
其他好文 时间：
2019-01-02 10:46:26
阅读次数：
235
一.Redis基本认知 1.含义： REmote DIctionary Server(Redis) | 是一个key-value存储系统 2.特性： 2.1 持久化：可以将内存中的数据保存在磁盘中，重启的时候可以再次加载进行使用； 2.2 支持丰富的数据类型，如：Strings, Lists, Ha ...
分类：
Web程序 时间：
2019-01-01 17:14:45
阅读次数：
614
1.kafka的HA（1）zookeeper在kafka中的作用： -Zookeeper帮助kafka集群运行：存储一些元数据，还会帮助kafka集群进行管理（选主） -存储关于消费者消费了哪些topic到那个进度的数据。 （2）kafkaHA解决的问题： 存在的问题：kafka在0.8以前的版本中，并不提供highava
分类：
其他好文 时间：
2018-12-30 23:24:12
阅读次数：
321
slave_net_timeout slave_net_timeout表示slave在slave_net_timeout时间之内没有收到master的任何数据(包括binlog，heartbeat)，slave认为连接断开，会进行重连。 超时后，立刻重连，后续重连的时间间隔由 CHANGE MAST ...
分类：
数据库 时间：
2018-12-30 20:39:22
阅读次数：
251
（使用newScheduledThreadPool来模拟心跳机制） 1 public class HeartBeat { 2 public static void main(String[] args) { 3 ScheduledExecutorService executor = Executor ...
分类：
其他好文 时间：
2018-12-30 02:40:38
阅读次数：
179
系统开发中，数据库是非常重要的一个点。除了程序的本身的优化，如：SQL语句优化、代码优化，数据库的处理本身优化也是非常重要的。主从、热备、分表分库等都是系统发展迟早会遇到的技术问题问题。Mycat是一个广受好评的数据库中间件，已经在很多产品上进行使用了。希望通过这篇文章的介绍，能学会Mycat的使用 ...
分类：
数据库 时间：
2018-12-28 18:31:46
阅读次数：
216
需要开启FEDERATED存储引擎SHOWVARIABLESLIKE‘%plugin%‘没有的话需要现下载放到文件夹下然后installpluginFEDERATEDsoname‘ha_federated.so‘;SHOWENGINES;CREATETABLEggss(idint(11)NOTNULLAUTO_INCREMENT,wfidvarchar(10)DEF
分类：
数据库 时间：
2018-12-28 16:41:24
阅读次数：
191
