文章分类 -  大数据CDC-seatunnel

seatunnel-Mongodb to MySQL CDC 测试 - 2.3.11
摘要:1. MongoDB CDC to MySQL 从错误日志 The $changeStream stage is only supported on replica sets 可知:MongoDB 的 changeStream 功能(CDC 依赖的核心能力)仅支持「副本集(Replica Set)」 阅读全文
posted @ 2025-09-03 15:25 xibuhaohao 阅读(10) 评论(0) 推荐(0)
seatunnel-MySQL to MySQL CDC 测试 - 支持整库 2.3.11
摘要:1. 同步整库表数据(支持新增表) 要让 Seatunnel 2.3.11 支持同步源库(source)新建的表,需要确保 CDC 能捕获到新表的 schema 变化 并 自动在 sink 端创建对应表。 核心问题分析 当前配置中 schema-changes.enabled = true 已开启, 阅读全文
posted @ 2025-09-02 20:17 xibuhaohao 阅读(27) 评论(0) 推荐(0)
seatunnel-MySQL to MySQL CDC 测试 - 多表(不支持整库)2.3.8
摘要:根据你提供的 MySQL-CDC 源配置(同步 testdb 库的 table1-table4 共 4 张表),结合 SeaTunnel 2.3.8 版本的 JDBC MySQL Sink 连接器(文档参考:MySQL Sink),Sink 需满足 “多表一对一同步”(源表 testdb.table 阅读全文
posted @ 2025-09-02 17:41 xibuhaohao 阅读(27) 评论(0) 推荐(0)
seatunnel-MySQL to MySQL CDC 测试 - 单表 2.3.8
摘要:https://www.cnblogs.com/xibuhaohao/articles/19068912 - seatunnel-安装部署测试 https://www.cnblogs.com/xibuhaohao/articles/19068914 - seatunnel-MySQL to MySQ 阅读全文
posted @ 2025-09-02 14:03 xibuhaohao 阅读(30) 评论(0) 推荐(0)
seatunnel-MySQL to MySQL JDBC 测试-单表 2.3.8
摘要:安装下载与用例测试,请参考:https://www.cnblogs.com/xibuhaohao/articles/19068912 1. 配置作业文件(核心核心) 作业配置文件是 SeaTunnel 定义「数据输入→处理→输出」逻辑的核心,文档以 config/v2.batch.config.te 阅读全文
posted @ 2025-09-01 20:55 xibuhaohao 阅读(23) 评论(0) 推荐(0)
seatunnel-安装部署测试 2.3.8
摘要:1 下载 1.1 下载 seatunnel 网页地址:https://seatunnel.apache.org/docs/2.3.8/start-v2/locally/deployment export version="2.3.8" wget "https://mirrors.aliyun.com 阅读全文
posted @ 2025-09-01 20:52 xibuhaohao 阅读(15) 评论(0) 推荐(0)