在费用转换里面做了两个值映射。一个是编码、一个是名称。其中两个值映射设置不一样效果不一样。 第一个编码映射 目标字段名不为空，则表示会新增字段。其中复核源值条件的都会转换为目标值，不符合条件的会用【不匹配的默认值】的字符串覆盖。那有人可能会问，如果不匹配的时候可否继续用原来的字段值来用？可以，看第二 ...
分类：
其他好文 时间：
2018-09-09 19:44:41
阅读次数：
470
原始需求如下： 业务系统设置成这样，见截图。 工资项目为了方便录入，都是做成列的。 但是这些数据需要和另外的费用报销系统的数据关联，费用报销系统的费用项目是横向的，用费用项目、金额的多行来表达。那么这里工资的数据如何转换成行呢？ 在Kettle里面做一个列转行的转换就行。参考如下。 其中表输入的数据 ...
分类：
其他好文 时间：
2018-09-09 16:52:19
阅读次数：
474
kettle转换中的各个组件是并行的关系，job中是有先后顺序的，这样就可能会遇到一种情况——我想在某个步骤完成后再执行下面的步骤，这时该怎么办呢？那么这时就可以用到【阻塞数据】和【阻塞数据直到完成】两个组件；【阻塞数据】：这个组件只允许前一个步骤的最后一条数据通过，这个往往和【执行SQL脚本】组件并用；【阻塞数据直到完成】：这个组件会将所设置的被阻塞步骤的所有数据堵住，当被阻塞的步骤完成后，才会
分类：
数据库 时间：
2018-09-05 23:57:02
阅读次数：
1022
第一次接触ETL工具，使用心得 对于DB到DB的输入输出，需要先在lib路径下放置各个DB的驱动jar包，然后再进行创建连接 使用的版本为6.1，图形界面就是友好，拖拽即可很是方便 工具也很全面，抽出字段，加工，去重等都是简单的一匹，关联只需要按住shift直接拖拽 流程具象化，简直就是在画流程图中 ...
分类：
其他好文 时间：
2018-09-05 12:08:56
阅读次数：
192
今天介绍下kettle的一个比较实用的组件——生成记录；当我们想将一部分文本数据变成数据行，每个字段作为一个数据行的一个列，那么我们可以利用这个组件；它的位置在双击点开根据自己的实际需要进行设置当设置后，可以点击预览，上面的【限制】选项就是行的数量；其中有三个选项是必填项——名称，类型，值
分类：
其他好文 时间：
2018-09-04 20:17:56
阅读次数：
455
继续给大家介绍几个小组件：一、字符串替换这个功能类似于oracle的replace函数，就是将某个字段的某些字符替换成我们给定的字符首先，选择【输入流字段】，【输出流字段】自己命名（就是用来保存处理后的结果的字段，可以和输入流字段保持一致），可以选择【使用正则表达式】，【搜索】就是你希望被替换的字符、字符串，可以是一个正则表达式，【使用，，，替换】就是你期望用什么值替换被替换的部分，【设置为空串】
分类：
其他好文 时间：
2018-09-03 17:18:31
阅读次数：
2738
接下来几天给大家介绍下几个常用的kettle组件1.剪切字符串所谓的剪切字符串，就类似于Oracle的substr函数，具体位置在某个转换的核心对象-转换中，如图使用方法为--双击打开组件，选择你要裁剪的流字段（必须），输出字段（选填），输入初始和结束位置，这样就好了；2.增加常量所谓的增加常量就是增加x个字段，而这每个字段的值都是常量（这里的x是个大于等于0的自然数），具体位置在某个转换的核心对
分类：
其他好文 时间：
2018-09-03 11:14:09
阅读次数：
1106
ETL工具kettle，在老版设计后，使用新版时，居然发生了内存溢出的错误： 出现： java heap 或者 OutOfMemory等字样 这是kettle分配的内存不足。 在kettle的运行路径中，用文本编辑器打开Spoon.bat，找到: REM ********************** ...
分类：
其他好文 时间：
2018-09-01 17:37:01
阅读次数：
168
性能调优在整个工程中是非常重要的，也是非常有必要的。但有的时候我们往往都不知道如何对性能进行调优。其实性能调优主要分两个方面：一方面是硬件调优，一方面是软件调优。本章主要是介绍Kettle的性能优化及效率提升。 一、Kettle调优 1、 调整JVM大小进行性能优化，修改Kettle定时任务中的Ki ...
分类：
其他好文 时间：
2018-09-01 17:33:04
阅读次数：
235
作者：Grey 原文地址： http://www.cnblogs.com/greyzeng/p/5524614.html 需求： 将Oracle数据库中某张表历史数据导入MySQL的一张表里面。 源表（Oracle）：table1 目标表（MySQL）：table2 数据量：20,000,000 思 ...
分类：
其他好文 时间：
2018-09-01 17:29:37
阅读次数：
695
