摘要: 应客户要求,需要同步数据到他们自己的数据库用于简单的数据分析,但这部分数据在postgresql,客户又不想再建pg,想直接同步到他们现有的mysql库,实时性倒是不要求。 考虑到 1、异构数据库同步 2、只同步指定客户的行数据 有之前同步到es的经验,同样使用了腾讯oceanus,其它工具没搞定 阅读全文
posted @ 2025-02-20 14:42 老王76 阅读(254) 评论(0) 推荐(0)
摘要: 测试了多个方案同步,最终选择oceanu产品,底层基于Flink cdc 1、实时性能够保证,binlog量很大时也不产生延迟 2、配置SQL即可完成,操作上简单 下面示例mysql的100张分表实时同步到es,优化备注等文本字段的like查询 创建SQL作业 CREATE TABLE from_m 阅读全文
posted @ 2025-02-20 13:38 老王76 阅读(60) 评论(0) 推荐(0)