会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
genius
persist and you will get it
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
3
4
5
6
7
···
20
下一页
2025年9月14日
kettle从入门到精通 第107课 ETL之kettle json_input 一个点号引发的血案
摘要: 场景:在一个kettle交流群内,有一个小伙伴求助:大致意思是json input的输入参数的key中存在点号,凡是带点号的key都无法正确获取。 今天一起来分析下使用多种方式来解决这个问题,希望后续有人遇到此类问题时可以秒杀它,而不是花费N根头发!!! 1、json数据构造 { "id": "1"
阅读全文
posted @ 2025-09-14 22:04 慕容尘轩
阅读(142)
评论(0)
推荐(0)
2025年9月9日
kettle插件-sqlserver cdc插件,从sqlserver获取实时数据so easy,早早下班
摘要: 场景: 昨天发布了Oracle CDC的使用教程,有一位朋友留言“sql server cdc”是否可以,答案是肯定的。 废话少说,开干,今天咱们一起来学习Sqlserver cdc。 1、安装sqlserver数据库 本教程使用 docker 安装sqlserver,命令如下: docker ru
阅读全文
posted @ 2025-09-09 22:17 慕容尘轩
阅读(36)
评论(0)
推荐(0)
2025年9月3日
kettle插件-oracle cdc插件,过五关斩六将终于搞定oracle实时数据同步
摘要: 自我介绍: 大家好!我是Java小金刚,在互联网金融行业打拼了10年的老兵。如果你对Java编程、互联网金融、大数据以及软件开发领域感兴趣,那么快来关注我公众号【Java小金刚】,让我带你领略最新最炙手可热的技术动态和经验分享。 场景: 群里时不时会有小伙伴询问Oracle cdc的相关问题,我本人
阅读全文
posted @ 2025-09-03 19:56 慕容尘轩
阅读(101)
评论(0)
推荐(0)
2025年8月24日
kettle从入门到精通 第106课 ETL之kettle Cache数据库单表6000万+数据轻松提取
摘要: 场景: 周四的时候群里一个小伙伴发出求助信息,大概意思是要从Cache(业内医疗同仁都知道东华的医疗系统有使用Cache数据库)单表中抽取数据到sqlserver数据库,该表数据量为6000万+,在使用kettle抽取的过程中总是遇到内存溢出的问题。 群友提供帮助信息:1、增大内存。2、分批处理。不
阅读全文
posted @ 2025-08-24 20:51 慕容尘轩
阅读(114)
评论(0)
推荐(0)
2025年8月23日
kettle从入门到精通 第105课 ETL之kettle 解决api接口无返回页数和记录数的分页问题
摘要: 场景: 今天下午小朋友和妈妈去游乐园玩了,一个人在家里也挺好,比较清净。学学习充充电,无意中看到赵总群里求助kettle分页问题。想着分页问题已经被我一网打尽了,不料实战时翻车了几次,搞了几次死循环直接内存溢出挂掉。接下来咱们一起来探索下。 1、API接口 接口入参数:token,page(当前页码
阅读全文
posted @ 2025-08-23 14:57 慕容尘轩
阅读(63)
评论(0)
推荐(0)
kettle插件-kettle RustFs插件,轻松解决文件上传到RustFs服务器
摘要: 场景: 前面咱们介绍了kettle的MinIO插件,现阶段国内各大公司都在搞新创,支持国产,在这里RustFS,就是MinIO国产信创平替方案,so 我们今天一起来学习下kettle的rustFs插件。 1、本地搭建RustFs服务器 拉取 rustfs/rustfs:latest镜像 docker
阅读全文
posted @ 2025-08-23 14:52 慕容尘轩
阅读(200)
评论(2)
推荐(0)
2025年8月22日
kettle插件-kettle python插件,python插件终于搞定了,有此插件可以称霸武林了,雄起
摘要: 场景:这款kettle的python插件从开始研究设计到客户生产使用,整个过程可以说非常不容易。 2025年7月17日23电25分文老师突然微信滴滴我询问是否可以做python插件,我当时也没有想到实现python插件的难度就直接答应下来,谁知做起来是相当于不容易,由于 团队老师是边工作边研究,整个
阅读全文
posted @ 2025-08-22 22:03 慕容尘轩
阅读(127)
评论(0)
推荐(0)
2025年8月13日
kettle插件-kettle http post plus插件失灵了?继续迭代优化轻松调用公卫高安全系数接口
摘要: 场景:一个朋友遇到调用公卫https接口时提示未上传证书问题寻求我们的帮助,本来想着有现有的插件可以吊打这个问题,谁知道瞬间啪啪打脸。 接下来咱们一起探个究竟。 1、经验主义 看到此问题,第一时间想到的是我们的http post plus插件,该插件可以忽略ssl校验,应该可以轻松解决这个https
阅读全文
posted @ 2025-08-13 10:05 慕容尘轩
阅读(47)
评论(0)
推荐(0)
2025年8月9日
kettle从入门到精通 第104课 ETL之kettle kettle调用python的四种方法
摘要: 场景: 有个小伙伴微信私我咨询是否可以针对kettle定制python插件,确切的说是python3插件。我们团队老师沟通后一致认为kettle的python插件还是很具有挑战性的。 虽然kettle的python插件比较有挑战,但是我相信最终肯定要搞定这款插件。之前的课程中有讲过kettle调用p
阅读全文
posted @ 2025-08-09 22:33 慕容尘轩
阅读(138)
评论(0)
推荐(0)
kettle插件-kettle MinIO插件,轻松解决文件上传到MinIO服务器
摘要: 场景:周二下班刚下地铁的时候有一位大佬,咨询kettle是否可以适配MinIO,功能要实现将图片或者base64通过kettle直接上传到MinIO服务器。 接到需求,沟通需求,开干。经过3天左右研发和调试MinIO插件已经成功交付,对方经常部署到生产环境。 1、本地搭建MinIO服务器 拉取 qu
阅读全文
posted @ 2025-08-09 22:33 慕容尘轩
阅读(83)
评论(0)
推荐(0)
上一页
1
2
3
4
5
6
7
···
20
下一页
公告