随笔分类 -  ETL

ETL安装和一些常见问题
摘要:安装ETL需要安装Kettle和JDK 1,ETL 我使用的是 pdi-ce-8.3.0.0-371 ,可以去KETTLE官网找一下 或者 用 https://www.ylmfwin8.com/soft/50783.html 下载的8.2版本 2,ETL下载完成后,解压到本地即可(不要有中文路径) 阅读全文
posted @ 2023-10-09 14:11 Kyk 阅读(208) 评论(0) 推荐(0)
使用ETL-Kettle实现分片查询存储
摘要:ETL实现分片查询可以分成以下几个步骤: 1, 获取分片信息 Get Slice Data 2, 循环执行程序 Loop Job 整体结构如下: 1, Get Slice Data 首先我们要确定执行计划的次数,得到一个数组 (设置计划执行次数) 语句可以参考 function get_time_s 阅读全文
posted @ 2023-04-26 17:37 Kyk 阅读(310) 评论(0) 推荐(0)