随着平台上的任务越来越多,且部分任务相互依赖,目前使用的crontab定时调度已经无法满足使用需求.急需一个任务依赖调度系统,笔者以前使用过oozie,但是oozie配置过多,而且维护繁琐,属于重量级系统.所以最终我选择使用azkaban.网上关于oozie和azkaban比较的文章很多,有兴趣可以 ...
分类：
其他好文 时间：
2018-05-26 16:45:38
阅读次数：
272
spring定时任务只开启一个线程去工作也就是串行工作，定时调度任务出现阻塞导致线程终止 加上这个试试 ...
分类：
编程语言 时间：
2018-05-15 19:37:33
阅读次数：
470
当单库已不能支撑当前业务的时候，我们往往都考虑进行分库（横向拆分或者纵向拆分）。但分库有个无法回避的问题，就是事务问题。网上有很多分布式事务解决方案，例如XA,TCC等，但是最常用，也是改造成本最低就是使用最终一致性来保证分布式事务。 比较常用的就是使用消息中间件（RabbitMq，RocketMq... ...
分类：
数据库 时间：
2018-03-06 21:49:58
阅读次数：
348
MySQL数据库的二进制日志binlog记录了对数据库的全量DDL和DML操作，对数据库的point to point灾难恢复起着无法替代的关键作用。因此，基于此类考虑，需要对生产环境产生的binlog做好相应的备份措施。 这里主要谈及2种备份方法，一种通过脚本定时调度的方式，强行切换binlog，增量备
分类：
数据库 时间：
2018-02-04 21:00:55
阅读次数：
210
很多时候，都需要使用定时调度，比如每隔一段时间运行一个爬虫爬取新的数据，实现方法有Quartz，spring task和Timer spring task可以将它比作一个轻量级的Quartz，而且使用起来很简单，除spring相关的包外不需要额外的包 推荐使用注解式实现 在相关的配置下加个这句配置， ...
分类：
编程语言 时间：
2018-01-22 13:01:55
阅读次数：
173
一般在web开发中定时调度比较有用，因为要维护一个容器不关闭才可以一直定时操作下去。 定时调度：每当一段时间之后，程序就会自动执行，就称为定时调度。如果要使用定时调动，则必须要保证程序要始终运行着，也就是说定时调度是在程序之外又启动了一个新的线程。 完成定时调度需要Timer和TimerTask类的 ...
分类：
编程语言 时间：
2018-01-16 00:51:31
阅读次数：
183
APScheduler简介 在平常的工作中几乎有一半的功能模块都需要定时任务来推动，例如项目中有一个定时统计程序，定时爬出网站的URL程序，定时检测钓鱼网站的程序等等，都涉及到了关于定时任务的问题，第一时间想到的是利用time模块的time.sleep()方法使程序休眠来达到定时任务的目的，虽然这样 ...
分类：
其他好文 时间：
2017-12-23 23:14:57
阅读次数：
263
在Navicat里面，找到函数，右键，新建函数，选择过程，如果有参数就填写函数，如果没有就直接点击完成 在BEGIN......END中间编写要执行的sql语句，例如下面存储过程取名为pro_data_bak: 然后在xml里面引用 通过java定时调度调用这个存储过程就OK了 ...
分类：
数据库 时间：
2017-12-07 20:48:08
阅读次数：
371
1. Timer简介 Timer是jdk中提供的一个定时器工具，使用的时候会在主线程之外起一个单独的线程执行指定的计划任务，可以指定执行一次或者反复执行多次。 通过创建Timer对象，然后调用Timer的schedule方法，将TimerTask实例作为参数，从而实现定时调度TimerTask（其中 ...
分类：
其他好文 时间：
2017-12-02 20:17:46
阅读次数：
190
定时调度基本在任何平台或多或少的要用到，实现定时调度的功能很简单，我做过的项目中用到更多的是spring quartz或者spring task，它们在单机上使用定时任务配置是非常简单的，但是在集群环境中就需要面临一个必须解决的问题：如何限定只有一台机器在执行定时任务？ 其实spring quart ...
分类：
其他好文 时间：
2017-11-24 00:10:42
阅读次数：
177
