本人为转载,感谢作者的辛勤劳作:http://blog.csdn.net/rotkang/article/details/20810921 1、Kettle概念 Kettle 是一款国外开源的 ETL 工具,纯 Java 编写,绿色无需安装,数据抽取高效稳定(数据迁移工具)。 Kettle 中文名称 ...
分类:
其他好文 时间:
2017-09-19 15:25:24
阅读次数:
229
1、mysql存储过程,可以实现动态表读取,满足较为复杂的业务逻辑 2、sql server存储过程,使用执行sql语句的脚步步骤,实现数据的逐行调用 3、抽取过程流程图: 表输入: 执行sql语句步骤,使用参数传递上步骤的值 ...
分类:
数据库 时间:
2017-09-18 00:27:22
阅读次数:
344
从excel工作表中读取数据逐行执行insert语句插入到sqlserver 为了简单起见只选取了两个字段作为参数,字符类型的需要加上'' 执行结果如下: ...
分类:
数据库 时间:
2017-09-15 23:47:51
阅读次数:
310
Pentaho Data Integration (Kettle) 一套基于Java的开源ETL工具集,是商务智能套件Pentaho的一部分。 社区主页:http://community.pentaho.com/projects/data-integration 帮助文档:https://help. ...
分类:
其他好文 时间:
2017-09-05 19:04:13
阅读次数:
196
1、引言 最近公司开始一个etl项目,底层结合开源的kettle进行开发。那么学习kettle势在必行,kettle的使用在这里就不用介绍了,网上有很多的资料。例如:kettle中文社区,我们在这里主要介绍代码方面的开发。 2、开发环境 引用别人的一篇博客: https://my.oschina.n ...
分类:
系统相关 时间:
2017-09-03 00:30:53
阅读次数:
265
前言 现代Web开发中,在JSP中嵌入Java脚本不是推荐的做法,因为这样 不利于代码的维护。有很多好的,替代的方法避免在JSP中写Java脚本。本文仅做为JSP体系技术的一个了解。 类成员定义 1、将定义的代码放在<%! %>之间即可。 定义的成员将被转换为servlet类的成员。 2、可以定义任 ...
分类:
编程语言 时间:
2017-09-02 22:38:38
阅读次数:
187
KETTLE集群搭建 说明:本文档基于kettle5.4 一、集群的原理与优缺点1.1集群的原理 Kettle集群是由一个主carte服务器和多个从carte服务器组成的,类似于master-slave结构,不同的是’master’处理具体任务,只负责任务的分发和收集运行结果。Master cart... ...
分类:
其他好文 时间:
2017-08-31 01:04:17
阅读次数:
245
注:部分内容引用了 http://blog.sina.com.cn/s/blog_4ac9f56e0101g881.html1、mongodb传数据到mysql1)在kettle中,mongodb input组件。2)编辑组件输入连接信息选择数据库写查询语句选择字段。上面的复选框选择是否输入json... ...
分类:
数据库 时间:
2017-08-31 01:04:03
阅读次数:
266
表名 说明 R_CLUSTER R_CLUSTER_SLAVE R_CONDITION R_DATABASE 数据库连接信息 R_DATABASE_ATTRIBUTE 数据库属性 R_DATABASE_CONTYPE 连接类型:Native (JDBC) JDBC等 R_DATABASE_TYPE.... ...
分类:
其他好文 时间:
2017-08-31 01:00:49
阅读次数:
275
一、kettle变量类型kettle变量分为:1.环境变量通过 set variables组件设置变量,范围可以是:JVM变量、作业变量、父作业变量、根作业变量。使用时通过${var}或 %%var%%变量方式引用变量2.属性文件变量在.kettle目录下的kettle.property文件中设置,... ...
分类:
其他好文 时间:
2017-08-31 00:59:41
阅读次数:
544