本文主要介绍我了解的kettle源码结构，当使用时遇到bug能快速定位到具体代码，有常规修改思路。
分类：
其他好文 时间：
2015-06-28 01:15:46
阅读次数：
345
这是一篇几年前写下的文档，最近打算根据这篇文档重写一下kettle插件的教程。结果各种理由，一推再推。今天索性将这篇文档发布出来，分享给大家，例子等有空再补上。这是一篇基于kettle3.2基础上完成的kettle插件文档。然而现在最新版的kettle的界面已经完全变了样了，但是那些组件还是那么.....
分类：
其他好文 时间：
2015-06-26 13:21:36
阅读次数：
288
CPU:Intel i3 3.40GHzMemory : 8GKettle默认配置将MySQL上的一张29W条数据的表，通过Kettle增量抽取到Vertica数据库中，结果在排序这一步报内存溢出异常。本来以为是kettle运行出错了，然后又重新试了一次，结果错误重现了。具体异常如下：org.ecl...
分类：
编程语言 时间：
2015-06-25 12:20:04
阅读次数：
333
Talend将设计的模型直接生成了java代码，可以直接对模型生成的java代码进行调试，排查问题比kettle灵活很多， 设计的模型如下： 生成的代码如下： 点击 Java Debug进入调试模式，可以设置断点，单步跟进，和eclipse一模一样的调试，非常方便：
分类：
其他好文 时间：
2015-06-15 20:05:30
阅读次数：
188
一，理解开发环境与生产环境。比如，在windows或mac下设计好流程之后，把该设计文件上传到linux集群的机器上执行。那么，在windows下进行的工作即为开发环境，任务具体在linxu机器上执行即为生产环境。二，Kettle转换转换包括一个或多个步骤，步骤之间通过跳(hop)来连接。跳定义了一...
分类：
其他好文 时间：
2015-06-15 18:13:44
阅读次数：
219
Kettle是Pentaho的一个组件，主要用于数据库间的数据迁移，到我用过的4.2版，还不支持noSQL，不知道4.4是不是支持了。 Kettle自己有三个主要组件：Spoon，Kitchen，Pan。其中Spoon是一个图形化的界面，用于windows的时候，先设置环境变 量：pentaho_....
分类：
其他好文 时间：
2015-06-13 12:50:04
阅读次数：
189
ETL和Kettle简介ETL即数据抽取（Extract）、转换（Transform）、装载（Load）的过程。它是构建数据仓库的重要环节。数据仓库是面向主题的、集成的、稳定的且随时间不断变化的数据集合，用以支持经营管理中的决策制定过程。数据仓库系统中有可能存在着大量的噪声数据,引起的主要原因有：滥...
分类：
其他好文 时间：
2015-06-13 12:41:37
阅读次数：
262
关于Kettle的事务和转换内步骤的顺序执行 近来有项目中遇到Kettle事务处理和转换内步骤顺序执行的问题。为此进行了研究，找到了一个解决办法。在Kettle中，一个Job内的转换，缺省是顺序执行的；一个转换内的步骤，缺省是并行执行的。但是，社区版不支持job内的事务处理，只支持转换内的事务。因此...
分类：
其他好文 时间：
2015-06-11 18:34:28
阅读次数：
715
使用kettle在抽取大量excel数据时，总是遇到excel中有一些特殊字符，导致ExecuteSQL script步骤执行失败，本文记录一些方法过滤一些特殊字符。同行有更好的方式实现，欢迎指点，共同学习。...
分类：
编程语言 时间：
2015-06-11 08:12:14
阅读次数：
1027
