一、规划lvs01eth0:192.168.240.134eth1:192.168.253.130rs01eth0:192.168.253.128gateway：192.168.253.130rs02eth0:192.168.253.129gateway：192.168.253.130192.168.240.0网段供外网访问，使用NAT192.168.253.0网段为内网段，使用hostonlyvip(外网)：192.168.240.144dip（内..
分类：
其他好文 时间：
2014-09-12 02:31:33
阅读次数：
239
mysql5.6配置同步复制的新方法以及常见问题的解决方法...
分类：
数据库 时间：
2014-09-11 22:29:22
阅读次数：
227
分布式锁的作用 一般来讲，锁的作用是在于解决不同的执行流之间对于同一个资源的竞争而产生的问题。分布式锁的作用就在于解决分布式程序中，分布在不同机器上的执行流对于资源的竞争问题。在mongodb的cluster上,...
分类：
数据库 时间：
2014-09-11 19:38:22
阅读次数：
291
引言
之前成功在服务器上为Mahout0.9打patch，使其支持Hadoop2.2.0。
今天的需求是：在Win7+Eclipse+Maven环境下开发Mahout程序，打jar包放到集群上，使其在Hadoop2.2.0下正常运行。
过程
步骤一：Eclipse下创建Maven工程
pom.xml：
1.引入mahout依赖
depe...
nginx 是优秀的反向代理服务器，这里主要讲它的健康检查和负载均衡机制，以及这种机制带来的问题。所谓健康检查，就是当后端出现问题（具体什么叫出现问题，依赖 于具体实现，各个实现定义不一样），不再往这个后端分发请求，并且做后续的检查，直到这个后端恢复正常。所谓负载均衡，就是选择后端的方式，如何（根据...
分类：
其他好文 时间：
2014-09-11 19:14:52
阅读次数：
233
本文描述了如何使用Nginx实现在应用层实现7层负载均衡功能，Nginx支持虚拟主机，可以按照轮询，IP哈希，URL哈希，权重方式对后端服务器做负载均衡，还支持后端服务器健康检查功能。废话不多说，详细配置见下文~测试模型如下：1、一台Nginx做负载负载均衡代理 具体配置centos5.8 ip 1...
分类：
其他好文 时间：
2014-09-11 19:12:42
阅读次数：
126
Tomcat服务器是一个免费的开放源代码的Web应用服务器，目前最新版本是6.x，相对5.x性能提升很多，主要优化了内存使用，增强IO能力，重新构造集群功能。 近期对Tomcat6.x作深入学习，参考上述声明的Tomcat全攻略，由于笔者是2001年针对Tomcat4.x所写，故参考之并针对Tomc...
分类：
其他好文 时间：
2014-09-11 18:49:42
阅读次数：
160
第一步：通过Spark的shell测试Spark的工作 ? Step1:启动Spark集群，这一点在第三讲讲的极为细致，启动后的WebUI如下： Step2:启动Spark Shell： 此时可以通过如下Web控制台查看shell的情况： Step3:把Spark安装目...
分类：
其他好文 时间：
2014-09-11 13:59:12
阅读次数：
171
第一步：通过Spark的shell测试Spark的工作Step1:启动Spark集群，这一点在第三讲讲的极为细致，启动后的WebUI如下：Step2:启动Spark Shell：此时可以通过如下Web控制台查看shell的情况：Step3:把Spark安装目录“README.md”拷贝到HDFS系统...
分类：
其他好文 时间：
2014-09-11 13:52:12
阅读次数：
228
任务执行优化1. 推测式执行： 如果jobtracker 发现有拖后的任务，会再启动一个相同的备份任务，然后哪个先执行完就会去kill掉另一个，因此会在监控页面上经常能看到正常执行完的作业会有被kill掉的任务。2.推测式执行缺省打开，但如果是代码问题，并不能解决问题，而且会使集群更慢，通过在ma....
分类：
其他好文 时间：
2014-09-10 23:39:31
阅读次数：
317
