调度算法?当MapReduce有很多的作用执行的时候,那么他是按照什么样的顺序让作业去执行呢?那么在设定顺序的时候需要关注那些问题呢?1.作业的吞吐量2.优先级别默认的调度算法:FifoScheduler,只有一个队列。CapacityScheduler和FairSecheduler:多队列公平调度...
分类:
其他好文 时间:
2015-12-15 14:30:17
阅读次数:
122
服务器以及软件规划:linux服务器:3台系统版本:centos6.5x86_64(1台是lvs调度器,安装lvs调度软件,2台是RS服务器,运行web服务)2.IP地址规划:LVSServer:
eth0:0VIP:192.168.1.222/24
eth0DIP:192.168.1.134/24
RS1:RS2:
eth0192.168.1.135/24eth0192.168.1.136/24
lo:019..
分类:
其他好文 时间:
2015-12-14 19:14:43
阅读次数:
190
什么是GCD 1.全称是Grand Central Dispatch,可译为“牛逼的中枢调度器” 2.纯C语言,提供了非常多强大的函数GCD的优势GCD是苹果公司为多核的并行运算提出的解决方案GCD会自动利用更多的CPU内核(比如双核、四核)GCD会自动管理线程的生命周期(创建线程、调度任务、销.....
分类:
移动开发 时间:
2015-12-11 06:52:59
阅读次数:
211
设置是我在多个项目中通用的,不过根据应用场景的不同,还会有其它细调,就不在这一一说明了。 - Sunface +K true 开启epoll调度,在linux中开启epoll,会大大增加调度的效率+A 100 异步线程池,为某些port调用服务+P 1024000 最大进程数+Q 65535 最大port数+sbt db 绑定调度器,绑定后调度器的任务队列不会在各个CPU线程...
分类:
其他好文 时间:
2015-12-10 19:41:38
阅读次数:
222
LVS (Linux Virtual Server)Linux 服务器集群LVS服务器集群中基于IP的负载均衡技术,有3种实现模式:VS/NET模式,VS/TUN模式(IP隧道模式),VS/DR模式(直接路由模式)一,【VS/NET 模式】1,配置Linux Director(前端负载调度器)IP,...
分类:
其他好文 时间:
2015-12-10 19:33:19
阅读次数:
299
keepalived+lvs前面我们讲解了使用LVS实现服务器的负载均衡,但是有两个问题我们没有解决分别是调度器的单点故障,第二个是服务器池的健康检查,今天我们使用keeplaved解决这两个问题,实际上keeplaved就是LVS的辅助工具。keeplaved主要实现的功能就是故障切换和健康检测来判断..
分类:
其他好文 时间:
2015-12-10 09:36:00
阅读次数:
294
前面的文章已经把接口请求、响应等前序工作做好,那么如何施加压力呢,看下面 1.点击线程组,设置线程属性,其中:线程数即并发用户数,ramp-up period是多长时间初始化上面的并发用户数,循环次数勾选永远代表一直循环执行接口 2. 设置压力时间,调度器的时间是指jemter所在机子的系统时间 3...
分类:
其他好文 时间:
2015-12-09 19:39:39
阅读次数:
320
class JobQueueJobInProgressListener extends JobInProgressListener ,其中JobQueueJobInProgressListener有个静态内部类JobSchedulingInfoint compare(Object o1, Objec...
分类:
其他好文 时间:
2015-12-08 22:26:46
阅读次数:
146
LVS工作原理1. Virtual Server via Network Address Translation(VS/NAT)通过网络地址转换,调度器重写请求报文的目标地址,根据预设的调度算法,将请求分派给后端的真实服务器;真实服务器的响应报文通过调度器时,报文的源地址被重写,再返回给客户,完成整...
分类:
其他好文 时间:
2015-12-08 00:09:21
阅读次数:
165
OS开发多线程篇—GCD介绍一、简单介绍1.什么是GCD?全称是Grand Central Dispatch,可译为“牛逼的中枢调度器”纯C语言,提供了非常多强大的函数2.GCD的优势GCD是苹果公司为多核的并行运算提出的解决方案GCD会自动利用更多的CPU内核(比如双核、四核)GCD会自动管理线程...
分类:
移动开发 时间:
2015-12-04 18:37:21
阅读次数:
213