kettle实现简单的增量同步

Posted on 2018-10-12 15:25  打杂滴  阅读(1633)  评论(0编辑  收藏  举报

下载 pdi-ce-7.0.0.0-25.zip 解压

安装jdk 1.7以上的版本

配置环境变量

下载并将mysql-connector-java-5.1.39.jar 拷贝到 \data-integration\lib目录下

1.新增转换命名为testsetvar,保存的文件名为testsetvar.ktr

表输入:获取目标表的最大id作为本次抽取数据的起始id

数据库连接:获取源数据表的当前最大id-1作为本次抽取数据的结束id

如果要从多个数据源获取值来设置变量,可以使用使用数据库连接来获取值以用来设置变量

 

2.新增带参转换testrans,保存的文件为testrans.ktr

3.新增job命名为testjob,保存的文件名为test.kjb

 

Copyright © 2024 打杂滴
Powered by .NET 8.0 on Kubernetes