摘要： 上篇文章使用java步骤实现了根据excel表头名称读取数据，虽然实现了功能，但是使用起来依然不是特别友好，抽时间把代码抽离搞成了excel 插件，接下来咱们一起看下如何使用这款插件。 1、安装插件 将插件安装包kettle-excell-plus-plugin-1.0.1.zip放到kettle的 阅读全文

摘要： 场景： 前些日子有位博客园朋友留言，内容如下： 【你好 我遇到一个问题 在网上找了很多资料也无果刚接手kettle 有一个业务是读取excel然后写入表中但是excel表头会经常变动 导致程序运行失败 excel已经做了字段定义但是模板变动后读取的数据 就对应不上字段如定义字段name 姓名age 阅读全文

摘要： 场景： 上周群里探讨了kettle的job依赖问题（kettle DAG），可谓是热闹非凡，今天抽时间一起整理和探讨下。比如有三个job，分别是jobA1、jobA2、jobB，要实现jobA1和jobA2并行执行，然后等jobA1和jobA2执行结束之后在执行jobB。废话少说，开干。 1、 方案 阅读全文

摘要： 场景：有小伙伴私聊我咨询，使用kettle调用his相关接口时，入参和响应数据均为xml结构报文，无法掉通接口。今天咱们一起来梳理下如何解决这种问题。 1、添加jar文件 1）将staxon-1.3.jar、hutool-all-5.6.0.jar、xiaojingang-https-0.0.1-S 阅读全文

摘要： 场景：周五的时候一个小伙伴加我v请教kettle分页问题，当时想的这个问题很简单，直接丢个demo不就完事了嘛，结果搞了3个晚上才搞定，今天来复盘下踩过的坑。 1、先解决报错问题 首先我处理问题的方式一般是腾讯会议连麦线上排雷。对方的第一个问题是脚本中定义了两个字段，一个是page 默认值是0，另外 阅读全文

摘要： 前言： XKG：是金刚团队自研的kettle调度系统，可以非常灵活的调度kettle的trans和job。 webspoon9.4：是金刚团队自研的webkettle/webspoon，团队成员可以很方便的在线设计trans和job，解决团队协助问题。 1、XKG系统创建资源库 1）新建文件资源库 阅读全文

摘要： 场景：昨天本地测试全局异常捕获的时候没有获取到详细日志，今天公众号后台有位热心网友提供了方案，并且亲测可行，晚上下班后一起梳理成长，将大爱持续传递。 方案是： 官方文档解释这个邮件的目的是“用于作业失败或成功时，通知作业成功或者失败”，所以邮件正文只会显示成功或者失败。这个步骤可以在作业中的任何位置 阅读全文

摘要： 场景：之前在kettle社群里面有看到这样一个job，一个job中有很多作业项，每个作业项执行失败之后都会自动发送邮件通知。当我看到这个设计之后，第一时间的反应是：kettle肯定存在统一异常或者统一错误处理机制。好，今天咱们一起来学习下。 1、基于webspoon设计子转换t1_error 1）生 阅读全文

摘要： 场景：使用kettle将多条数据合并为一条数据或者将多行转一行。比如有下面三条数据： 姓名 年龄 职称 金老师 36 资深架构师 倪老师26 研发架构 马老师 28 数据专家 要求将上述三条数据转换为一条数据，如： 金刚团队老师分别为金老师, 倪老师, 马老师；年龄分别为36, 26, 28；职称分 阅读全文

摘要： 场景： 我们在使用kettle的过程中，可以针对每个脚本文件进行异常捕获和发送邮件，也可以使用xkg-pdi平台统计进行异常捕获。今天我们一起来学习下如何使用xkg-pdi来捕获异常并且发送邮件进行预警。 1、配置邮箱 我这里演示的是基于126邮箱进行测试的，其他邮箱也类似。 1）开启邮箱的smtp 阅读全文