摘要： 场景：国产数据库（金仓，达梦，瀚高，海量等）信创环境下最近发展的势头很猛，今天我们一起来学习下人大金仓（电科金仓）数据库，从金仓数据库中读取数据以及使用金仓数据库作为kettle的资源仓库，废话少数，开干。 1、使用docker安装金仓数据库。 官网下载docker镜像文件，使用docker loa 阅读全文

摘要： 场景：最近vip群小伙伴在国产麒麟系统安装kettle时遇到无法正常启动的问题，今天周末远程连麦小伙伴一起解决此问题，梳理成章，方便后续小伙伴。 1、报错信息 国产麒麟系统安装kettle时遇到无法正常启动，提示错误信息为I'm sorry, this Linux platform aarch64 阅读全文

摘要： 前面我们已经介绍了很多kettle插件，每个kettle插件都它的使用场景，我们在做数据同步ETL的过程中，势必要处理一些脏数据，把数据质量提高。今天我们一起来学习这这款数据清洗插件。 1、转换设计 1）生成记录 模拟数据输入 2）数据清洗 选择具体的数据清洗规则对数据进行清洗 3）写日志 输出清洗 阅读全文

摘要： 场景：在一个kettle交流群内，有一个小伙伴求助：大致意思是json input的输入参数的key中存在点号，凡是带点号的key都无法正确获取。 今天一起来分析下使用多种方式来解决这个问题，希望后续有人遇到此类问题时可以秒杀它，而不是花费N根头发！！！ 1、json数据构造 { "id": "1" 阅读全文

摘要： 场景： 昨天发布了Oracle CDC的使用教程，有一位朋友留言“sql server cdc”是否可以，答案是肯定的。 废话少说，开干，今天咱们一起来学习Sqlserver cdc。 1、安装sqlserver数据库 本教程使用 docker 安装sqlserver，命令如下： docker ru 阅读全文

摘要： 自我介绍： 大家好！我是Java小金刚，在互联网金融行业打拼了10年的老兵。如果你对Java编程、互联网金融、大数据以及软件开发领域感兴趣，那么快来关注我公众号【Java小金刚】，让我带你领略最新最炙手可热的技术动态和经验分享。 场景： 群里时不时会有小伙伴询问Oracle cdc的相关问题，我本人 阅读全文

摘要： 场景： 周四的时候群里一个小伙伴发出求助信息，大概意思是要从Cache（业内医疗同仁都知道东华的医疗系统有使用Cache数据库）单表中抽取数据到sqlserver数据库，该表数据量为6000万+，在使用kettle抽取的过程中总是遇到内存溢出的问题。 群友提供帮助信息：1、增大内存。2、分批处理。不 阅读全文

摘要： 场景： 今天下午小朋友和妈妈去游乐园玩了，一个人在家里也挺好，比较清净。学学习充充电，无意中看到赵总群里求助kettle分页问题。想着分页问题已经被我一网打尽了，不料实战时翻车了几次，搞了几次死循环直接内存溢出挂掉。接下来咱们一起来探索下。 1、API接口 接口入参数：token，page（当前页码 阅读全文

摘要： 场景： 前面咱们介绍了kettle的MinIO插件，现阶段国内各大公司都在搞新创，支持国产，在这里RustFS,就是MinIO国产信创平替方案，so 我们今天一起来学习下kettle的rustFs插件。 1、本地搭建RustFs服务器 拉取 rustfs/rustfs:latest镜像 docker 阅读全文

摘要： 场景：这款kettle的python插件从开始研究设计到客户生产使用，整个过程可以说非常不容易。 2025年7月17日23电25分文老师突然微信滴滴我询问是否可以做python插件，我当时也没有想到实现python插件的难度就直接答应下来，谁知做起来是相当于不容易，由于 团队老师是边工作边研究，整个 阅读全文