import org.apache.hadoop.hbase.io.ImmutableBytesWritable import org.apache.hadoop.hbase.mapreduce.TableOutputFormat import org.apache.hadoop.hbase.cli ...
分类：
其他好文 时间：
2020-04-22 09:54:55
阅读次数：
108
Master节点： Slave节点与配置： Master/Slave相当于Server和agent的概念。Master提供web接口让用户来管理job和slave，job可以运行在master本机或者被分配到slave上运行。一个master可以关联多个slave用来为不同的job或相同的job的不 ...
分类：
其他好文 时间：
2020-04-19 23:42:25
阅读次数：
142
验证输入数据是每个批处理应用程序中必不可少的步骤。使用Easy Batch，可以通过注册一个或多个RecordValidator实现来验证记录，如下所示： Job job = new JobBuilder() .validator(new MyFirstRecordValidator()) .pro ...
分类：
其他好文 时间：
2020-04-19 10:50:12
阅读次数：
52
创建一个batch job 我们可以通过JobBuilder创建job 默认job 的名称为job 参考 Job job = new JobBuilder() .named("myJob") .build(); ? // Or ? Job job = JobBuilder.aNewJob() .na ...
分类：
其他好文 时间：
2020-04-18 23:22:48
阅读次数：
138
首先建一张员工表(emp) CREATE TABLE `emp` ( `empno` int(11) NOT NULL COMMENT '员工编号', `ename` varchar(20) COLLATE utf8mb4_bin NOT NULL COMMENT '员工姓名', `job` var ...
分类：
数据库 时间：
2020-04-18 18:49:03
阅读次数：
152
job 领域api 参考图 说明 通用的处理流程为： 通过包含JobParameters 参数的JobBuilder创建job 通过JobExecutor 执行job 通过JobReport获取job运行的状态 record 以及batch api easy-batch 提供了一个通用的record ...
分类：
其他好文 时间：
2020-04-18 18:38:20
阅读次数：
169
作用 保存执行job任务节点的执行日志 将多个节点执行map任务的日志和最终reduce日志聚合在一起 在mapred-site.xml中添加配置 1 <property> 2 <name>mapreduce.jobhistory.address</name> 3 <value>hostname:1 ...
分类：
其他好文 时间：
2020-04-18 15:52:26
阅读次数：
80
--创建存储过程:P_O_DEAL_REINSURE--脚本要一个个执行,不能批量执行--创建定时任务DECLARE JOB NUMBER;BEGIN DBMS_JOB.SUBMIT( JOB => JOB, WHAT => 'P_O_DEAL_REINSURE;', NEXT_DATE => SY ...
分类：
其他好文 时间：
2020-04-17 16:03:59
阅读次数：
139
公司有几台测试服务器,由于公司运维也帮忙去做服务器报警,但是由于测试服务器本来性能和线上机器硬件就不一样,所以让运维老师去掉了测试服务器报警,我们自己使用prometheus监控几台测试服务器,当出现故障的时候把报警数据发送到企业微信中. prometheus介绍 Prometheus（普罗米修斯） ...
分类：
其他好文 时间：
2020-04-17 13:57:10
阅读次数：
75
1、编写playbook还是接着上一节的内容，在windows本地的repo目录中已经有了ansible-playbook-repo项目；在ansible-playbook-repo中，再复制一份playbook出来：然后修改wordpress_playbooks中的内容：cd wordpress_... ...
分类：
其他好文 时间：
2020-04-16 22:33:14
阅读次数：
97
