随笔分类 -  学习之路

SeaTunnel(2.3.12)的高级用法(三):目标库(PostgreSQL)的DEMO
摘要:SeaTunnel(2.3.12)的高级用法(三):目标库(PostgreSQL)的DEMO 目标库默认是:PostgreSql_18.1。docker安装点这里 源头库用的是mysql:pgsql官方文档:https://seatunnel.apache.org/zh-CN/docs/connec 阅读全文

posted @ 2025-12-18 14:44 C_C_菜园 阅读(21) 评论(0) 推荐(0)

SeaTunnel(2.3.12)的高级用法(一):SeaTunnel的核心能力总结
摘要:seatunnel:抽取数据的引擎 SeaTunnel Zeta(本地引擎) Spark(集群) Flink(集群) seatunnel:执行命令 参数 解释 备注 JAVA_OPTS='-Xmx2g -Xms2g' 设置本次运行的内存大小 AI给我设的,好像也生效了 -DJvmOption="-X 阅读全文

posted @ 2025-12-18 13:43 C_C_菜园 阅读(28) 评论(0) 推荐(0)

SeaTunnel(2.3.12)的高级用法(二):CDC(实时增量采集)MySQL-CDC、Postgresql-CDC
摘要:一、实时增量采集-变更数据捕获(CDC)(datax没有的功能) mysql-cdc官方文档:https://seatunnel.apache.org/zh-CN/docs/2.3.3/connector-v2/source/MySQL-CDC/ cdc可以一个seatunnel的cdc任务监控多个 阅读全文

posted @ 2025-12-17 16:05 C_C_菜园 阅读(74) 评论(1) 推荐(0)

SeaTunnel(2.3.12)部署及其Demo(含CDC实时采集demo)
摘要:SeaTunnel部署及其Demo 从上图可以看出seatunnel的conf(执行命令文件),主要是source、transform、sink组成 📥 Source(数据源):作用:从各种数据源读取数据 🔄 Transform(数据转换):作用:对数据进行清洗、转换、加工 📤 Sink(数据 阅读全文

posted @ 2025-12-11 15:50 C_C_菜园 阅读(302) 评论(0) 推荐(2)

Java实现分片上传文件至服务器
摘要:分片上传 文件合并 map……? 等博主空了再写…… 阅读全文

posted @ 2025-11-21 15:14 C_C_菜园 阅读(8) 评论(0) 推荐(0)

Minio和FastDFS
摘要:区别 1、minio可以通过访问url直接把文件传上去、fastdfs不可以 2、 博主很懒,空了写 阅读全文

posted @ 2025-11-19 09:07 C_C_菜园 阅读(5) 评论(0) 推荐(0)

导航