2022年2月1日

Building a Sync Engin

摘要： 内容来自：https://www.grouparoo.com/blog/building-a-sync-engine 内容主要介绍了如何开发一个同步引擎，没有太多高深的，主要是基于了变动的时间戳以及水印算法 简单说明 预备 添加水印列，当然对于不同的数据库处理方式会不一样的，有些可能需要通过触发器 阅读全文

posted @ 2022-02-01 21:07 荣锋亮 阅读(42) 评论(0) 推荐(0)

grouparoo 基于nodejs 的开源反向ETL 工具

摘要： grouparoo 是一个基于nodejs 开发的反向ETL 工具，通过此我们可以学习内部机制 参考使用 安装 npm install -g grouparoo grouparoo init . grouparoo config 效果 启动之后需要通过注册以及添加app 包含ui 管理，支持的app 阅读全文

posted @ 2022-02-01 19:59 荣锋亮 阅读(271) 评论(0) 推荐(0)

Castled 源码解析 - container 模块说明

摘要： container 属于Castled api 后端服务，后端包含了任务调度，db 迁移，有几个服务是比较重要的 主要是pipelineservice，ExternalAppService，WarehouseService，而且官方还提供了一套基于events 的处理 主要包含PipelineEve 阅读全文

posted @ 2022-02-01 13:22 荣锋亮 阅读(77) 评论(0) 推荐(0)

导航