一、概述Ha,已经有两个月没有更新blog了。由于近排公司需要引入Spark相关技术，我也是作为技术攻关人员之一，在这段时间使用Spark遇到了挺多问题，跌的坑也比较多，这篇blog主要总结一下这段时间使用Spark遇到的一些问题。二、遇到的"坑"和爬坑思路1、SparkSqlonyarn-client模..
分类：
其他好文 时间：
2014-12-31 06:34:20
阅读次数：
1157
背景
tfs要求用gcc 4.1.2编译，两种方案1
是用centos5(自带gcc 4.1.2), 2
使用centos6
把gcc降到4.1.2。我使用的是第一个方法成功运行tfs，当做HA的时候问题来了，官方要求是用heartbeat
3.x，centos5是2.x。开始选择在centos5下编译heartbeat
3成功，但还需要编译pacemaker，编译的时...
分类：
Web程序 时间：
2014-12-30 20:46:35
阅读次数：
269
centos网络配置
环境：
系统硬件：vmware vsphere (CPU：2*4核，内存2G)
系统版本：Centos-6.5-x86_64
路由器网关：192.168.1.1
步骤：
1.查看网络MAC地址
[root@centos ~]# cat /etc/udev/rules.d/70-persistent-net.rules
显示如...
分类：
系统相关 时间：
2014-12-30 11:52:17
阅读次数：
253
具体的讲解一下如何将hadoop安装成HA模式...
分类：
其他好文 时间：
2014-12-30 01:47:23
阅读次数：
341
堡垒机的实施过程中，因为做了双机，所以要对两台堡垒机进行数据库的主从同步和HA配置。在部署完mysql主从同步以后，发现同步会有中断的现象。中断表现为Slave_IO_Running:YesSlave_SQL_Running:NoReplicate_Do_DB:Replicate_Ignore_DB:Replicate_Do_Table:Replicate_Ignore_Ta..
分类：
数据库 时间：
2014-12-29 18:41:56
阅读次数：
238
堡垒机的实施过程中，因为做了双机，所以要对两台堡垒机进行数据库的主从同步和HA配置。在部署完mysql主从同步以后，发现同步会有中断的现象。中断表现为Slave_IO_Running:YesSlave_SQL_Running:NoReplicate_Do_DB:Replicate_Ignore_DB:Replicate_Do_Table:Replicate_Ignore_Ta..
分类：
数据库 时间：
2014-12-29 18:40:56
阅读次数：
230
高可用的设计可以说是web服务架构的目标，如果服务达不到高可用，万一出现故障将会对产品带来重大的负面影响。高可用的架构就是能够让服务在任何情况下都能正常响应，比如双十一的淘宝，面对激增的洪峰照样正常工作；而聚美三周年时服务器的宕机恰好是高可用的反例。
在服务架构时，我们不能相信任何一个环节是100%没问题的，服务的每个层级，使用的数据库，缓存，甚至是服务器本身，服务器放置的机房这些硬件环节都不能完全相信。如果我们假设每个环节都有可能出现问题，在每个环节出现问题时都有方案应对，那么这样设计出来的服务一定就是高...
分类：
Web程序 时间：
2014-12-28 23:45:11
阅读次数：
197
一、Heartbeat概念Heartbeat是Linux-HA项目中的一个组件，也是目前开源HA项目中最成功的一个例子,Linux-HA的全称是High-AvailabilityLinux,这个开源项目的目标是：通过社区开发者的共同努力，提供一个增强linux可靠性（reliability)、可用性（availability）和可服务性（servic..
分类：
Web程序 时间：
2014-12-26 06:19:32
阅读次数：
401
序言：公司要准备虚拟化，将配置比较高的物理机虚拟化成N个虚拟机，以便可以给更多的应用服务提供服务。 1，使用vShere client连接到物理机上面，选择“配置”--“存储器”—“数据存储”，右键点击选择“浏览数据存储”，就可以上传文件，如下图所示：?2，将需要安装的centos.iso文件上传上去。3，右键开始创建虚拟机，然后选择安装类型4，输入虚拟机名称5，选择虚拟机文件的目标存储，选择虚拟...
分类：
系统相关 时间：
2014-12-25 20:35:26
阅读次数：
307
196．如果vCenterSingleSign-On安装失败并进行回滚，则vCenterServerJava组件(JRE)和vCentertcServer组件仍会进行安装(5.5)故障状态:如果SingleSign-On安装被取消或失败，则该安装将回滚到安装前的状态，此时系统会显示一条消息，指出系统未进行修改。但是，vCenterServerJava..
分类：
系统相关 时间：
2014-12-25 18:45:50
阅读次数：
425
