随笔分类 -  Kettle

摘要:一、环境准备 二、下载安装 三、运行软件 四、核心文件配置 五、在Linux上运行 六、服务器定时运行Job 一、环境准备 1.1 Centos7 1.2 创建用户 $ useradd -m -g bigdata etl -s /bin/bash # ll /home/查看是否创建成功 $ pass 阅读全文
posted @ 2022-01-10 09:46 xiaojy 阅读(3642) 评论(0) 推荐(0)
摘要:本案例基于kettle8.2 ,以sakila_dwh案例为素材,相关数据网络下载 一、流程图 二、生成小时、分钟、秒数据 1,新建转换-输入-生成记录,步骤名称为“生成小时” 2,复制两次上述步骤,分别命名为“生成分”、“生成秒” 3,按以下标记输入内容: (1)生成时: (2)生成分: (3)生 阅读全文
posted @ 2021-11-26 16:39 xiaojy 阅读(806) 评论(0) 推荐(0)
摘要:一、流程图 二、生产10年日期记录 1,新建转换-输入-生成记录 2,生产初始日期,在字段按以下格式输入“initial_date” 三、增加日期序列 1,点击“转换-增加序列” 2,定义值的名称为“DaySquence” 四、生成日期属性 1,点击“脚本-JavaScript代码” 2,将以下代码 阅读全文
posted @ 2021-11-17 17:27 xiaojy 阅读(969) 评论(0) 推荐(0)
摘要:一、内容大纲 1,文本文件抽取 二、文本文件抽取 2.1 流程图 2.2 操作流程 2.2.1 文本文件输入 1, 在转换-输入中选择‘文本文件输入’ 2, 进入菜单,在‘文件’输入文件路径(如果要合并文件夹内数据,输入文件夹路径并填写正则表达式) 3, 进入‘内容’选项: 输入文件类型; 填写分割 阅读全文
posted @ 2021-11-12 11:39 xiaojy 阅读(614) 评论(0) 推荐(0)
摘要:一、环境准备 二、下载安装 三、核心文件配置 四、运行软件 一、环境准备 1.1 Centos7 1.2 创建用户 $ useradd -m -g bigdata etl -s /bin/bash # ll /home/查看是否创建成功 $ passwd etl $ visudo $ su etl 阅读全文
posted @ 2021-08-06 11:58 xiaojy 阅读(449) 评论(0) 推荐(0)