在日常的开发中，运行定时任务基本上已经是很普遍的需求了，可以通过windows服务+timer组件来实现，也可以使用第三方框架来集成，Quartz.NET就是一款从JAVA的Quartz移植过来的一个不错的作业调度组件，但是当我们把作业都写好，并部署完成的时候，管理成为了很麻烦的事情，因此我基于Qu ...
分类：
Web程序 时间：
2016-12-15 11:18:07
阅读次数：
294
Scrapy主要包括以下组件：引擎：用来处理整个系统的数据流处理，触发事务。调度器：用来接受引擎发过来的请求，压入队列中，并在引擎再次请求的时候返回下载器：用来下载网页内容，并将网页内容返回给蜘蛛。蜘蛛：蜘蛛是主要干活的，用它来制定特定域名或网页的解析规则项目管..
分类：
其他好文 时间：
2016-12-14 02:42:19
阅读次数：
206
调度器主要分三种：合作式调度器、抢占式调度器、混合式调度器。合作式调度器 类似于‘排队买车票’，排在前面的先处理，处理完第一个，接着处理第二个，逐次进行。 抢占式调度器 类似于‘人机对弈·下象棋’，选择多路进攻或多路防守，哪儿薄弱攻哪儿，哪儿火急救哪儿。部队移动到位后，坚守那个位置，没接到命令前不得 ...
分类：
其他好文 时间：
2016-12-12 22:21:32
阅读次数：
169
http://www.cnblogs.com/wendingding/p/3806821.html 一、简单介绍 1.什么是GCD？ 全称是Grand Central Dispatch，可译为“牛逼的中枢调度器” 纯C语言，提供了非常多强大的函数 2.GCD的优势 GCD是苹果公司为多核的并行运算提 ...
分类：
移动开发 时间：
2016-12-12 14:54:38
阅读次数：
244
YARN（YetAnotherResourceNegotiator），它是统一的资源管理平台，是在Hadoop2.0中才出现的一个组件。YARN是Hadoop的处理层，包含资源管理器和作业调度器。它在它的资源管理器中去分配好队列，这个队列划分可以根据业务规则，根据技术的模块进行划分，比如同时拥有hive和hbase..
分类：
其他好文 时间：
2016-12-05 23:55:39
阅读次数：
357
haproxy+keepalived搭建nginx+lamp集群实验拓扑：实验环境：主机Ip地址软件haproxy主调度器192.168.100.154keepalived-1.2.13.tar.gzhaproxy-1.4.24.tar.gzhaproxy从调度器192.168.100.155keepalived-1.2.13.tar.gzhaproxy-1.4.24.tar.gzNginx1192.168.100.152nginx-1.6.2.tar...
分类：
其他好文 时间：
2016-12-04 17:38:41
阅读次数：
612
一、Quartz作业管理和存储方式简介： 作业一旦被调度，调度器需要记住并且跟踪作业和它们的执行次数。如果你的作业是30分钟后或每30秒调用，这不是很有用。事实上，作业执行需要非常准确和即时调用在被调度作业上的execute()方法。Quartz通过一个称之为作业存储（JobStore）的概念来做作 ...
分类：
其他好文 时间：
2016-12-04 16:54:27
阅读次数：
212
一、Quartz概述： Quartz是一个完全由Java编写的开源任务调度的框架，通过触发器设置作业定时运行规则，控制作业的运行时间。其中quartz集群通过故障切换和负载平衡的功能，能给调度器带来高可用性和伸缩性。主要用来执行定时任务，如：定时发送信息、定时生成报表等等。 二、相关术语： 三、Qu ...
分类：
其他好文 时间：
2016-12-03 11:58:04
阅读次数：
298
实现nginx和tomcat动静页面分离实验拓扑：公司内部需要搭建web集群，并且网站有静态页面和.jsp（java语言开发)的页面，现要求分别搭建处理这两种页面的不同服务到web群集中，并且实现调度器的备份，保证调度器的稳定；实验环境：服务器名称IP地址所需软件Tomcat1192.168.100.15..
分类：
其他好文 时间：
2016-12-01 15:10:36
阅读次数：
417
process_run()函数位于main函数中 找到函数的声明处： 函数process_run()返回当前在事件队列中等待的事件的数量，当没有即将发生的事件时，调度器会让CPU休眠 函数原型如下： 主要函数为do_poll()和do_event()。 以上是进程的总体调度，具体到单个进程，成员变量 ...
分类：
其他好文 时间：
2016-12-01 14:11:05
阅读次数：
249
