最近频繁出现使用job执行备份均失败,修改job的owner为sa以后执行就ok了,不知其原因为何,错误如下:Thejobfailed.Theowner(test-zuoqujia\Administrator)ofjobJob_test_FULLBACKUPdoesnothaveserveraccess.最近有时间做了下研究,来自微软官网的说明如下:InSQLServer2008orS..
分类:
数据库 时间:
2014-12-02 17:35:37
阅读次数:
177
一、先理解MapReduce作业组成
一个完整的MapReduce作业称作job,它包括三部分:
输入数据MapReduce程序配置信息
Hadoop工作时会将job分成若干个task:map任务和reduce任务
有两类节点控制作业执行的过程:JobTracker和TaskTracker
JobTra...
分类:
其他好文 时间:
2014-12-01 20:55:53
阅读次数:
280
问题描述:怎么捕获和记录死锁,大家知道SQLPROFILER对性能影响多大?解决方案:我们知道,可以使用SQLServer自带的Profiler工具来跟踪死锁信息。但这种方式有一个很大的敝端,就是消耗很大。据国外某大神测试,profiler甚至可以占到服务器总带宽的35%,所以,在一个繁忙的系统..
分类:
数据库 时间:
2014-12-01 16:19:58
阅读次数:
340
1.去RegexKitLite下载类库,解压出来会有一个例子包及2个文件,其实用到的就这2个文件,添加到工程中。 备用地址:http://www.cocoachina.com/bbs/job.php?action-download-pid-135286-tid-18111-aid-11143.htm...
分类:
移动开发 时间:
2014-12-01 12:41:07
阅读次数:
243
一、EXCEL文件导入:1、首先将EXCEL文件另存为CSV格式文件--->用UltraEdit工具打开时可看到字段之间以逗号分隔。 ,EMPNO,ENAME,JOB,MGR,HIREDATE,SAL,COMM,DEPTNO1,7369,SMITH,CLERK,7902,1980/12/17,80....
分类:
数据库 时间:
2014-11-30 16:40:39
阅读次数:
201
最近我所在的一个项目进行了Hadoop版本迁移,由hadoop-0.20.2迁移至hadoop-2.2.0,旧版的mapreduceJob虽然都是用旧的API写的,但在新环境下基本上都是兼容的,只有两个涉及到globalsort的Job,出现了同样的问题,报错分别如下:1、wrongkeyclass:org.apache.hadoop.io.LongWrita..
分类:
编程语言 时间:
2014-11-30 00:58:50
阅读次数:
198
1、MapReduce代码入口FileInputFormat.setInputPaths(job, new Path(input)); //设置MapReduce输入格式job.waitForCompletion(true);2、InputFormat分析public abstract class ...
分类:
移动开发 时间:
2014-11-29 00:15:04
阅读次数:
200
一、问题 使用spark join两张表(5000w*500w)总是出错,报的异常显示是在shuffle阶段。14/11/27 12:05:49 ERROR storage.DiskBlockObjectWriter: Uncaught exception while reverting par.....
分类:
其他好文 时间:
2014-11-28 22:45:03
阅读次数:
285
As a sourcing agent and buyer I can tell you what is a good quotation for me: it includes all relevant information! My job is to find a reliable suppl...
分类:
其他好文 时间:
2014-11-28 13:58:22
阅读次数:
121
线上部分实时job是用storm开发的,为了监控数据的延迟,在storm处理日志的时候会把日志的时间插入到redis中,然后通过zabbix做延迟的监控。由于经常有新的job上线,手动配置监控项就变得比较麻烦,为了解放生产力,还是需要搞成自动化。之前添加网卡和分区监控的时候用了LLD的..
分类:
其他好文 时间:
2014-11-28 06:26:22
阅读次数:
298