摘要: 作者 | Shawn Gordon 翻译 | Debra Chen 原文链接 | What the Heck is Apache SeaTunnel? 我在2023年初开始注意到Apache SeaTunnel的相关讨论,一直低调地关注着。该项目始于2017年,最初名为Waterdrop,在Apac 阅读全文
posted @ 2024-03-29 10:47 ApacheSeaTunnel 阅读(119) 评论(0) 推荐(0) 编辑
摘要: 一直以来,大数据量一直是爆炸性增长,每天几十 TB 的数据增量已经非常常见,但云存储相对来说还是不便宜的。众多云上的大数据用户特别希望可以非常简单快速的将文件移动到更实惠的 S3、OSS 上进行保存,这篇文章就来介绍如何使用 SeaTunnel 来进行到 OSS 的数据同步。 首先简要介绍一下 Ap 阅读全文
posted @ 2023-09-26 11:01 ApacheSeaTunnel 阅读(342) 评论(0) 推荐(0) 编辑
摘要: S3File 是一个用于管理 Amazon S3(Simple Storage Service)的 Python 模块。当前,Apache SeaTunnel 已经支持 S3File Sink Connector,为了更好地使用这个 Connector,有必要看一下这篇使用文档指南。 描述 将数据输 阅读全文
posted @ 2023-09-21 15:32 ApacheSeaTunnel 阅读(191) 评论(0) 推荐(0) 编辑
摘要: Apache SeaTunnel是一个非常易于使用的、超高性能的分布式数据集成平台,支持海量数据的实时同步。每天可稳定高效同步数百亿数据,已被近百家企业投入生产使用。 现在的版本不支持通过jtds的方式链接sqlserver,我们来自己写代码来实现它,并把代码提交给apache seatunnel。 阅读全文
posted @ 2023-09-13 11:24 ApacheSeaTunnel 阅读(206) 评论(0) 推荐(0) 编辑
摘要: ![file](https://img2023.cnblogs.com/other/3195851/202308/3195851-20230831114702799-1091292653.jpg) 提到数据处理,经常有人把它简称为“ETL”。但仔细说来,数据处理经历了ETL、ELT、XX ETL(例 阅读全文
posted @ 2023-08-31 11:47 ApacheSeaTunnel 阅读(256) 评论(0) 推荐(0) 编辑
摘要: ![file](https://img2023.cnblogs.com/other/3195851/202308/3195851-20230828185450336-2138333694.png) > 时隔两个月, Apache SeaTunnel 终于迎来大版本更新。此次发布的 2.3.3 版本在 阅读全文
posted @ 2023-08-28 18:54 ApacheSeaTunnel 阅读(824) 评论(0) 推荐(0) 编辑
摘要: ![file](https://img2023.cnblogs.com/other/3195851/202308/3195851-20230814171638731-1116543252.jpg) 作者 | 郭炜 策划 | 凌敏 ## 前言 下面是一段利用 Co-Pilot 辅助开发的小视频,这是 阅读全文
posted @ 2023-08-14 17:16 ApacheSeaTunnel 阅读(234) 评论(0) 推荐(0) 编辑
摘要: ![file](https://img2023.cnblogs.com/other/3195851/202308/3195851-20230811181235894-1707158282.png) # 个人简介 * 王海林 白鲸开源研发工程师 * GitHub ID:hailin0 * 做过性能监控 阅读全文
posted @ 2023-08-11 18:12 ApacheSeaTunnel 阅读(93) 评论(0) 推荐(0) 编辑
摘要: ![file](https://img2023.cnblogs.com/other/3195851/202307/3195851-20230719181113912-393860575.jpg) > 版本说明: > > SeaTunnel:apache-seatunnel-2.3.2-SNAPHOT 阅读全文
posted @ 2023-07-19 18:11 ApacheSeaTunnel 阅读(461) 评论(0) 推荐(0) 编辑
摘要: 采访嘉宾 | 郭炜、高俊 编辑 | Tina 北京时间 2023 年 6 月 1 日,全球最大的开源软件基金会 Apache Software Foundation(以下简称 ASF)正式宣布 Apache SeaTunnel 毕业成为 Apache 顶级项目 (TLP, Top Level Pro 阅读全文
posted @ 2023-06-27 08:55 ApacheSeaTunnel 阅读(513) 评论(0) 推荐(0) 编辑