随笔分类 -  Kettle

kettle变量（var变量）
摘要：设置变量/set varibale 1、定义变量（子转换）： 原始数据 设置获取变量：点击获取字段，自动获取变量名称和字段名称 引用变量： 输出： kettle.properties 文件存储在.kettle目录下 var=value 重启spoon 7.1版本中编辑-编辑kettle.proper 阅读全文
posted @ 2019-04-20 20:42 竹心_兰君 阅读(959) 评论(0) 推荐(0)
kettle变量（param命名参数2）
摘要：接arg参数： 通过命令行进行变量赋值和引用 定义跟界面定义相同： 赋值（转换）： 运行命令到kettle目录下 pan /file:path "/param:aa="bb"" "/param:file="abc"" 阅读全文
posted @ 2019-04-20 20:42 竹心_兰君 阅读(531) 评论(0) 推荐(0)
kettle集群（转换）
摘要：1、定义子服务器 新建子服务器中有一个必须为主服务器 新建集群 在需求集群运行的步骤中右键集群进行使用 阅读全文
posted @ 2019-04-20 20:42 竹心_兰君 阅读(407) 评论(0) 推荐(0)
kettle基于时间戳增量更新
摘要：思路1： 1、提前建好ts时间表，设置两个字段分别为current_t和load_t,current用于比较原表中日期的上限，load_t则为上次加载的日期，几位原表中日期的下限。 2.1、新建转换1，获取当前系统日期，并赋值给变量${SYSDATA}，然后更新到ts表中 在同一转换中通过表输入获取 阅读全文
posted @ 2019-04-20 20:41 竹心_兰君 阅读(5883) 评论(2) 推荐(0)
kettle查询
摘要：》流查询： 1、转换设计 2、主数据 3、查询数据 4、流查询 5、数据预览 查询中有重复数据默认获取最后一条：查询数据中有重复数据，默认获取到了最后一条数据。 主数据中无匹配数据则在结果集中返回null值。 》数据库查询： 主数据-数据库数据： 定义数据库查询： 勾选查询失败则忽略： 勾选多行结果 阅读全文
posted @ 2019-04-20 20:41 竹心_兰君 阅读(988) 评论(0) 推荐(0)
kettle查询-2
摘要：模糊匹配： 1、主数据/查询数据 2、模糊匹配 3、输出：jaro/jaro winkler/pair letters similarity(各自算法的匹配度measure value) http client/http post 阅读全文
posted @ 2019-04-19 11:17 竹心_兰君 阅读(502) 评论(0) 推荐(0)
kettle变量（param命名参数）
摘要：1、定义： 编辑-设置-命名参数 在当前界面下定义参数名称和缺省值。 2、引用：原始数据 通过${var}引用变量 输出 注：1、字符串在命名参数引用是需要添加单引号的，但位置参数是不需要进行转译； 2、引用变量时需要勾选替换sql语句.... 3、变量的生成双击空白处也可以打开属性 4、在sele 阅读全文
posted @ 2019-04-17 13:48 竹心_兰君 阅读(4339) 评论(0) 推荐(0)
kettle表更新/插入更新
摘要：更新： 1.1更新表： 目标表： 插入更新： 2.1匹配表： 目标表： 插入/更新转换 目标表 阅读全文
posted @ 2019-04-15 12:45 竹心_兰君 阅读(4393) 评论(0) 推荐(0)
Kettle中表输出字段和字段选择
摘要：表输出： 字段选择： 注：字段选择可以输出匹配后的选中列，表输出则输出匹配后的所有列。 阅读全文
posted @ 2019-04-15 11:32 竹心_兰君 阅读(8883) 评论(0) 推荐(0)
Kettle 变量（arg位置参数）
摘要：1、表输入中使用？占位作为kettle转换变量 数据预览： 获取变量数据： 使用？传入变量 需要勾选替换sql语句中的变量，并选则从步骤插入数据中所在步骤 数据预览 阅读全文
posted @ 2019-04-15 11:17 竹心_兰君 阅读(763) 评论(0) 推荐(0)