Change Capture可以比较具有相同列的数据集的差异,得出一个数据集(After)在另一个数据库(Before)的基础上产生的哪些变化。变化类型如表1:变化代码变化中文说明0no change无变化1insert新增2delete删除3edit有变化表1 变化种类1 JOB示例如图1,我们最...
分类:
其他好文 时间:
2015-01-26 19:15:50
阅读次数:
215
WITH SPLIT_TEST AS (SELECT 'ORACLE,MYSQL,HADOOP,PLANNING,DATASTAGE,10,11' AS SPLIT_STR FROM DUAL)SELECT REGEXP_SUBSTR(SPLIT_STR, '\w+', 1, LEVEL) AS B...
分类:
其他好文 时间:
2015-01-10 16:24:45
阅读次数:
120
以下为Datastage8.5的命令行方式的导入和导出,直接登陆服务器执行如下命令即可。不是Datastage客户端的导入和导出,使用命令行方式的好处是:可以将该命令使用shell脚本进行调用导入和导出。1.导入1.1 导入新作业(原工作空间里不存在)$DSHOME/../../Clients/is...
分类:
其他好文 时间:
2014-12-30 11:14:52
阅读次数:
195
主流ETL产品:Ascential公司的Datastage(Datastage在2005年被IBM收购)、Informatica公司的Powercenter、 NCR Teradata公司的ETL Automation(一套ETL框架、主要关注“抽取”)。ETL工具有:OWB(Oracle Ware...
分类:
其他好文 时间:
2014-11-14 13:53:26
阅读次数:
205
修改2个配置文件:cat /mistel/IBM/InformationServer/Server/DSEngine/.odbc.inicat /mistel/IBM/InformationServer/Server/Projects/sagent/uvodbc.config注:①路径修改为对应安装...
分类:
数据库 时间:
2014-09-09 15:24:08
阅读次数:
351
说明:①如果发现was、datastage已经自启动,但db2没有自启动,应先将它们停止,在按顺序启动;②如果都自启动了,就不用再启动,关闭防火墙即可。--0、关闭防火墙service iptables stop--1、db2su - db2inst1db2startps -efa | grep d...
分类:
其他好文 时间:
2014-09-09 15:12:18
阅读次数:
160
下面两个shell脚本是shell调用datastage作业时查找缺少作业和错误作业名的脚本脚本一:[root@dataStagefindjob]#moreerrcfgjob.sh
#!/bin/bash
#######################################################################
#purpose:findtheerrorconfigurationjobinthefiledsjob..
分类:
其他好文 时间:
2014-07-28 16:48:24
阅读次数:
379
GoldenGate作为Oracle公司大力发展的核心战略产品,在高可用、容灾、数据抽取转换方面扮演着越来越重要的作用。goldengate可以做什么,说起来真的太多了,高可用、容灾、Real-Time数据同步,如果你做过BI,一定知道ETL的工具(datastage、infomatica等),goldengate也可以做,而..
分类:
数据库 时间:
2014-07-21 12:11:24
阅读次数:
473
DataStage通过分析日志获取Job插入目标表的记录数这只是一种不太好的方法,也许还有更好、更简便的方法。这种方法要求每次运行Job之前删除已有的日志信息,否则无法统计出正确的记录数。当然,在Job跑完之后,可以在shell备份本次Job运行的日志到服务器磁盘。1日志清理设置登录..
分类:
其他好文 时间:
2014-05-20 18:21:01
阅读次数:
422