文章分类 -  Kettle

Kettle是一款国外开源的ETL工具,纯java编写,可以在Window、Linux、Unix上运行。
摘要:Kettle (四) SQL Server 2008 和 Oracle 11g之间的数据互导 Kettle7.1、SQL Server 2008、Oracle 11g 一、连接数据库 1、准备驱动 下载SQL Server对应JDBC驱动的jar包--mssql-jdbc-9.4.0.jre8.ja 阅读全文

posted @ 2021-08-25 21:30 MissRong 阅读(617) 评论(0) 推荐(0) |

摘要:Kettle (二)实战案例 (2) 关系型数据库和HDFS之间的数据同步 一、ETL流程图 开始--> 转换-初始化参数:TABLE_NAME(test.order_detail)和 IN_STAT_DATE --> 起始日志:操作的表名、操作状态、操作时间 --> 执行:将参数指代表中的数据 写 阅读全文

posted @ 2021-06-17 20:24 MissRong 阅读(311) 评论(0) 推荐(0) |

摘要:Kettle (二)实战案例 (1) 关系型数据库之间的数据同步 操作前的准备:建库建表 auto_increment=1 这个是修饰主键primary key,自动增长1 -- 日志库 create database etl; use etl; alter table control_table 阅读全文

posted @ 2021-06-16 17:33 MissRong 阅读(530) 评论(0) 推荐(0) |

摘要:Kettle (一) 安装及简介 一、安装 官网:https://sourceforge.net/projects/pentaho/files/Data%20Integration/ 参考: https://zhuanlan.zhihu.com/p/156906712 二、简介 1、运行方式 图形界 阅读全文

posted @ 2021-06-15 11:40 MissRong 阅读(383) 评论(0) 推荐(0) |

摘要:ETL及常用工具简介 ETL是数据抽取(Extract)、转换(Transform)、加载(Load)的缩写. 一、主流的数据同步工具 1、离线 Kettle、Sqoop、DataX 2、实时 Kafka、Flume、OGG 二、Kettle Kettle是一款国外开源的ETL工具,纯 Java 编 阅读全文

posted @ 2021-06-14 20:38 MissRong 阅读(2902) 评论(0) 推荐(0) |

博客园  ©  2004-2025
浙公网安备 33010602011771号 浙ICP备2021040463号-3