R7-全称翱旗创业（北京）科技有限公司，位于北京市朝阳区奥运村科技园区。是在高新软件技术应用领域中专业从事数据交互、ETL数据抽娶数据容灾备份、数据复制、数据整合的高新技术企业。R7致力于为政府、能源、金融、医疗、物流等行业提供数据交互中的专业服务。R7的研发团队来..
分类：
数据库 时间：
2014-10-27 06:59:58
阅读次数：
367
ETL工具完成的差不多了，今天遇到一个问题，就是给C3P0配置了maxPoolSize为10，目的是想让整个应用同时获得的最大的Connection个数为10，但是在测试应用的这一部分之后，发现PostgreSQL端的链接远远超过10个。因为工具是多线程的，所以就想，是不是多线程的问题，查了一下Connection的个数，也确实是10*线程个数。于是做了一个测试：
将maxPoolSize配置为...
分类：
编程语言 时间：
2014-10-26 11:43:26
阅读次数：
213
增量抽取 增量抽取只抽取自上次抽取以来数据库中要抽取的表中新增或修改的数据。在ETL使用过程中。增量抽取较全量抽取应用更广。如何捕获变化的数据是增量抽取的关键。对捕获方法一般有两点要求：准确性，能够将业务系统中的变化数据按一定的频率准确地捕获到；性能，不能对业务系统造成太大的压力，影响现有业务。目前...
分类：
其他好文 时间：
2014-10-26 01:36:07
阅读次数：
147
举例说明kettle中javascript步骤的错误处理功能。...
分类：
编程语言 时间：
2014-10-23 09:32:42
阅读次数：
327
Key words: merge compare columnswhen we contact merge sql in ETL,When we update some columns we should compare the value change or not.We always write...
分类：
其他好文 时间：
2014-10-22 14:24:51
阅读次数：
160
这几天协作实施人员做BI的项目。项目的开发已经接近尾声，后期的工作主要就是定义指标以及定义多维分析模型以及ETL的过程。下面具体把这次的工作总结一下：环境： 系统： ERP,HIS以及其他的子系统-------主要是业务数据以及一些数据字典（SQLServer2005） BI系统---...
分类：
其他好文 时间：
2014-10-17 23:17:55
阅读次数：
859
详细介绍kettle位置参数、命名参数、变量之间的区别及用法...
分类：
其他好文 时间：
2014-10-17 18:56:17
阅读次数：
338
kettle作为ETL工具，其功能日趋完善，已得到广大数据挖掘爱好者的青睐。又因为他是java开源项目，为适应项目需求，有必要研究其源码，最好能够集成到Java项目中，作为项目运行流程的一个重要环节来使用。...
分类：
编程语言 时间：
2014-10-16 20:51:23
阅读次数：
299
kettle 调用外部java类，示例说明。...
分类：
编程语言 时间：
2014-10-12 23:48:18
阅读次数：
327
Kettle是ETL工具，它可以把文本文件的数据导入数据到HBase中，本文主要描述如何使用最新的Kettle 5.X版本把文本文件导入到hadoop-1.2.1+HBase 0.94.19的数据库中。...
分类：
其他好文 时间：
2014-10-12 23:32:38
阅读次数：
168
