本文主要是比较三种分布缓存负载均衡的方法，第一种是最简单的将 key的hash值对机器数取模算法，第二种是一致性哈希算法，第三种是淘宝开源的缓存解决方案tair的均衡算法。下面来分析下这三种算法的优缺点。第一种：传统的数据分布方法,将key的hash值对机器数取模 这个算法的实现非常简单，计算ha....
分类：
其他好文 时间：
2014-12-31 17:50:33
阅读次数：
331
一、概述Ha,已经有两个月没有更新blog了。由于近排公司需要引入Spark相关技术，我也是作为技术攻关人员之一，在这段时间使用Spark遇到了挺多问题，跌的坑也比较多，这篇blog主要总结一下这段时间使用Spark遇到的一些问题。二、遇到的"坑"和爬坑思路1、SparkSqlonyarn-client模..
分类：
其他好文 时间：
2014-12-31 06:34:20
阅读次数：
1157
背景
tfs要求用gcc 4.1.2编译，两种方案1
是用centos5(自带gcc 4.1.2), 2
使用centos6
把gcc降到4.1.2。我使用的是第一个方法成功运行tfs，当做HA的时候问题来了，官方要求是用heartbeat
3.x，centos5是2.x。开始选择在centos5下编译heartbeat
3成功，但还需要编译pacemaker，编译的时...
分类：
Web程序 时间：
2014-12-30 20:46:35
阅读次数：
269
这个实验我是在centos6-6进行的，首先给两台主机添加一块5G的硬盘，DRBD硬件规定两块硬盘的容量大少相同。创建逻辑卷[root@centos-serverconf]#fdisk/dev/sdbnp1wq配置环境，修改主机名：[root@centos-server~]#hostnamedrbd-1#vim/etc/sysconfig/network需要重启[root@centos-..
分类：
其他好文 时间：
2014-12-30 01:51:38
阅读次数：
199
具体的讲解一下如何将hadoop安装成HA模式...
分类：
其他好文 时间：
2014-12-30 01:47:23
阅读次数：
341
堡垒机的实施过程中，因为做了双机，所以要对两台堡垒机进行数据库的主从同步和HA配置。在部署完mysql主从同步以后，发现同步会有中断的现象。中断表现为Slave_IO_Running:YesSlave_SQL_Running:NoReplicate_Do_DB:Replicate_Ignore_DB:Replicate_Do_Table:Replicate_Ignore_Ta..
分类：
数据库 时间：
2014-12-29 18:41:56
阅读次数：
238
堡垒机的实施过程中，因为做了双机，所以要对两台堡垒机进行数据库的主从同步和HA配置。在部署完mysql主从同步以后，发现同步会有中断的现象。中断表现为Slave_IO_Running:YesSlave_SQL_Running:NoReplicate_Do_DB:Replicate_Ignore_DB:Replicate_Do_Table:Replicate_Ignore_Ta..
分类：
数据库 时间：
2014-12-29 18:40:56
阅读次数：
230
高可用的设计可以说是web服务架构的目标，如果服务达不到高可用，万一出现故障将会对产品带来重大的负面影响。高可用的架构就是能够让服务在任何情况下都能正常响应，比如双十一的淘宝，面对激增的洪峰照样正常工作；而聚美三周年时服务器的宕机恰好是高可用的反例。
在服务架构时，我们不能相信任何一个环节是100%没问题的，服务的每个层级，使用的数据库，缓存，甚至是服务器本身，服务器放置的机房这些硬件环节都不能完全相信。如果我们假设每个环节都有可能出现问题，在每个环节出现问题时都有方案应对，那么这样设计出来的服务一定就是高...
分类：
Web程序 时间：
2014-12-28 23:45:11
阅读次数：
197
环境规划:node1192.168.1.10510.10.10.1node2192.168.1.10610.10.10.2集群软件:heartbeat-3.0.4数据库:mysql-5.7.4二进制包1.节点上的网络配置node1节点:[root@node1~]#hostnamenode1[root@node1~]#ifconfigeth0eth0Linkencap:EthernetHWaddr00:0C:29:79:7F:C7inetaddr:192.168..
分类：
数据库 时间：
2014-12-28 18:21:53
阅读次数：
247
1,ocfs22,crmsh(cluster management shell,)==crm shell[pacemaker OpenAIS,heartbeat,corosync,crmsh]3,开源的ceph pk RedHat Glustercrm-moncorosync-cfgtool,cor...
分类：
其他好文 时间：
2014-12-26 18:25:30
阅读次数：
191
