kettle中如何实现表的批量同步:[3]区间同步
上一篇“平面文件”的经验中,我们讲到了如果通过平面文件的方式全量的迁移数据!但是实际使用中,我们一般是增量的做同步。这里我们介绍下,如果通过时间字段,来批量的实现数据增量同步!
新建一个转换,获取时间范围
将时间赋值到环境变量
再新建一个转换,用于获取需要同步的表以及对应的数据区间条件后保存到结果中
在“自定义常量数据”中定义同步的表和条件。其中${FROMDATE}和$TODATE}就是上一个转换中设置的全局变量
再新建一个转换,实现单表的数据同步(参考上一篇“平面文件”经验)
新加一个JOB,将上面的转换串联起来,并设置下循环调用单表同步
浙公网安备 33010602011771号