上一页 1 2 3 4 5 6 ··· 19 下一页
摘要: 场景:最近vip群小伙伴在国产麒麟系统安装kettle时遇到无法正常启动的问题,今天周末远程连麦小伙伴一起解决此问题,梳理成章,方便后续小伙伴。 1、报错信息 国产麒麟系统安装kettle时遇到无法正常启动,提示错误信息为I'm sorry, this Linux platform aarch64 阅读全文
posted @ 2025-09-20 15:50 慕容尘轩 阅读(65) 评论(0) 推荐(0)
摘要: 前面我们已经介绍了很多kettle插件,每个kettle插件都它的使用场景,我们在做数据同步ETL的过程中,势必要处理一些脏数据,把数据质量提高。今天我们一起来学习这这款数据清洗插件。 1、转换设计 1)生成记录 模拟数据输入 2)数据清洗 选择具体的数据清洗规则对数据进行清洗 3)写日志 输出清洗 阅读全文
posted @ 2025-09-20 15:29 慕容尘轩 阅读(98) 评论(0) 推荐(0)
摘要: 场景:在一个kettle交流群内,有一个小伙伴求助:大致意思是json input的输入参数的key中存在点号,凡是带点号的key都无法正确获取。 今天一起来分析下使用多种方式来解决这个问题,希望后续有人遇到此类问题时可以秒杀它,而不是花费N根头发!!! 1、json数据构造 { "id": "1" 阅读全文
posted @ 2025-09-14 22:04 慕容尘轩 阅读(88) 评论(0) 推荐(0)
摘要: 场景: 昨天发布了Oracle CDC的使用教程,有一位朋友留言“sql server cdc”是否可以,答案是肯定的。 废话少说,开干,今天咱们一起来学习Sqlserver cdc。 1、安装sqlserver数据库 本教程使用 docker 安装sqlserver,命令如下: docker ru 阅读全文
posted @ 2025-09-09 22:17 慕容尘轩 阅读(24) 评论(0) 推荐(0)
摘要: 自我介绍: 大家好!我是Java小金刚,在互联网金融行业打拼了10年的老兵。如果你对Java编程、互联网金融、大数据以及软件开发领域感兴趣,那么快来关注我公众号【Java小金刚】,让我带你领略最新最炙手可热的技术动态和经验分享。 场景: 群里时不时会有小伙伴询问Oracle cdc的相关问题,我本人 阅读全文
posted @ 2025-09-03 19:56 慕容尘轩 阅读(59) 评论(0) 推荐(0)
摘要: 场景: 周四的时候群里一个小伙伴发出求助信息,大概意思是要从Cache(业内医疗同仁都知道东华的医疗系统有使用Cache数据库)单表中抽取数据到sqlserver数据库,该表数据量为6000万+,在使用kettle抽取的过程中总是遇到内存溢出的问题。 群友提供帮助信息:1、增大内存。2、分批处理。不 阅读全文
posted @ 2025-08-24 20:51 慕容尘轩 阅读(67) 评论(0) 推荐(0)
摘要: 场景: 今天下午小朋友和妈妈去游乐园玩了,一个人在家里也挺好,比较清净。学学习充充电,无意中看到赵总群里求助kettle分页问题。想着分页问题已经被我一网打尽了,不料实战时翻车了几次,搞了几次死循环直接内存溢出挂掉。接下来咱们一起来探索下。 1、API接口 接口入参数:token,page(当前页码 阅读全文
posted @ 2025-08-23 14:57 慕容尘轩 阅读(36) 评论(0) 推荐(0)
摘要: 场景: 前面咱们介绍了kettle的MinIO插件,现阶段国内各大公司都在搞新创,支持国产,在这里RustFS,就是MinIO国产信创平替方案,so 我们今天一起来学习下kettle的rustFs插件。 1、本地搭建RustFs服务器 拉取 rustfs/rustfs:latest镜像 docker 阅读全文
posted @ 2025-08-23 14:52 慕容尘轩 阅读(92) 评论(0) 推荐(0)
摘要: 场景:这款kettle的python插件从开始研究设计到客户生产使用,整个过程可以说非常不容易。 2025年7月17日23电25分文老师突然微信滴滴我询问是否可以做python插件,我当时也没有想到实现python插件的难度就直接答应下来,谁知做起来是相当于不容易,由于 团队老师是边工作边研究,整个 阅读全文
posted @ 2025-08-22 22:03 慕容尘轩 阅读(94) 评论(0) 推荐(0)
摘要: 场景:一个朋友遇到调用公卫https接口时提示未上传证书问题寻求我们的帮助,本来想着有现有的插件可以吊打这个问题,谁知道瞬间啪啪打脸。 接下来咱们一起探个究竟。 1、经验主义 看到此问题,第一时间想到的是我们的http post plus插件,该插件可以忽略ssl校验,应该可以轻松解决这个https 阅读全文
posted @ 2025-08-13 10:05 慕容尘轩 阅读(39) 评论(0) 推荐(0)
上一页 1 2 3 4 5 6 ··· 19 下一页