05 2025 档案

实战分享：DolphinScheduler 中 Shell 任务环境变量最佳配置方式
摘要：在使用 Apache DolphinScheduler 编排任务的过程中，Shell 类型任务是最常见的任务类型之一。然而，很多用户在实际使用中都会遇到一个看似简单却常常引发问题的问题——环境变量怎么设置才有效？ 如果你也曾经因为任务执行环境不一致、找不到命令路径、引用变量失败等问题而抓狂，那么这篇 阅读全文
posted @ 2025-05-27 18:05 海豚调度 阅读(312) 评论(0) 推荐(0)
Apache DolphinScheduler存储系统详解| AI生成技术文档系列
摘要：Apache DolphinScheduler 的存储系统提供统一接口，支持跨多种存储后端（如本地文件系统、云存储）进行文件存取。其核心功能是管理工作流和任务所需的资源文件（如脚本、JAR包、配置文件），并通过抽象底层存储技术，实现无缝切换存储方案而无需修改应用代码。 阅读全文
posted @ 2025-05-27 16:21 海豚调度 阅读(162) 评论(0) 推荐(0)
4月报 | 将已派遣任务按工人组划分到不同等待队列提案落地
摘要：各位热爱 Apache DolphinScheduler 的小伙伴们，今年 4 月份社区月报来啦！社区月报每月更新一次，欢迎关注本栏目，即时跟进项目最新进展。 🎯 本月看点：任务调度更智能，队列管理更高效！ 在本月更新中，最值得关注的是来自社区贡献者 @det101 的 [DSIP-55] 提案正 阅读全文
posted @ 2025-05-27 16:08 海豚调度 阅读(37) 评论(0) 推荐(0)
第四期评选结果公示！Apache DolphinScheduler社区答疑Star揭晓
摘要：Apache DolphinScheduler社区答疑Star第四期评选活动圆满完成啦！本次活动旨在表彰那些长期为社区用户提供专业解答、积极推动技术交流的社群管理员。经过社区成员的公开票选，在25个社区群中共有3位表现突出的管理员获得最多投票。让我们热烈祝贺以下获奖者（按排名顺序）： 🏆 第一名： 阅读全文
posted @ 2025-05-23 15:31 海豚调度 阅读(19) 评论(0) 推荐(0)
高能预警！白鲸开源将赴约亚马逊云科技Community Day，共探Agent AI未来
摘要：盛夏将至 一场技术狂欢即将上演 热血开发者蓄势待发 海量议题即将引爆全场！ Community Day倒计时仅剩一周 你准备好了吗？ 参与论坛：Next下一代开发范式 时间段：13:30-17:30 聚焦改变开发者日常的革命性突破 没有晦涩的技术说教 只有前沿的实战分享 下一代开发范式，由你定义！ 阅读全文
posted @ 2025-05-20 10:20 海豚调度 阅读(30) 评论(0) 推荐(0)
基于DolphinScheduler抽取通用EventBus组件：支持延迟与事件驱动
摘要：一、思路来源 虽然guava中的eventbus已经很方便了，但是还是想要实现一个更为方便，同时支持延迟事件、同时带eventbus的组件。在Apache DolphinScheduler项目中，有一个eventbus的组件，这个组件写得挺好的，想着用在业务系统上，因此自己抽取了一下，拿到业务系统中 阅读全文
posted @ 2025-05-19 18:31 海豚调度 阅读(72) 评论(0) 推荐(0)
升级遇到坑？一文带你搞定 DolphinScheduler 2.0 到 3.0 升级
摘要：1.升级背景 因项目需要使用数据质量模块功能，可以为数仓提供良好的数据质量监控功能。故要对已有2.0版本升级到3.0版本以上，此次选择测试了3.0.1 和 3.1.1 两个版本，对进行同数据等任务调度暂停等操作测试，最后选择3.0.1 版本 原因： 3.1.1 在测试sql任务时 ，同时启动上百sq 阅读全文
posted @ 2025-05-14 14:48 海豚调度 阅读(104) 评论(0) 推荐(0)
Apache DolphinScheduler社区答疑Star第三期评选结果公示
摘要：Apache DolphinScheduler社区答疑Star第三期评选活动圆满完成啦！本次活动旨在表彰那些长期为社区用户提供专业解答、积极推动技术交流的社群管理员。经过社区成员的公开票选，和上期一样，在25个社区群中共有2位表现突出的管理员获得最多投票。让我们热烈祝贺以下获奖者（按排名顺序）： � 阅读全文
posted @ 2025-05-13 14:21 海豚调度 阅读(32) 评论(0) 推荐(0)
Agentic AI要终结数据库和SaaS？大厂掌门人公开互撕，焦虑的CEO们押上了不同的技术路线
摘要：作者 | Tina Agent 正在成为 2025 年 AI 世界最炙手可热的关键词之一。 无论是大模型厂商、AI 初创公司，还是企业级应用团队，几乎都在讨论“多智能体协作”“自动化决策流程”以及“具备工具调用能力的 AI 系统”。 谷歌、英伟达等科技巨头纷纷布局，上个月亚马逊还成立了一个专注于 A 阅读全文
posted @ 2025-05-13 11:54 海豚调度 阅读(192) 评论(0) 推荐(0)
你没见过的调度玩法！Zoom首次公开DolphinScheduler创新应用
摘要：Apache DolphinScheduler 社区 Meetup 又来啦！本次活动，我们特别邀请到了来自 Zoom 的技术专家师彬杰，带来《DolphinScheduler 在 Zoom 的生产实践》主题分享，揭秘全球最大的线上会议平台 Zoom 是如何在业务中高效使用 DolphinSchedu 阅读全文
posted @ 2025-05-13 10:53 海豚调度 阅读(55) 评论(0) 推荐(0)
开源之夏2025 | DolphinScheduler邀你挑战技术任务，赢取丰厚奖金！
摘要：开源之夏2025 已进入学生报名冲刺阶段！全球知名的大数据调度平台 Apache DolphinScheduler 再次加入这一开源盛会，为高校学子提供两大技术挑战任务，助力提升开发能力与开源贡献经验。无论你是想深入云原生技术，还是探索分布式系统优化，这里都有你的舞台！ 阅读全文
posted @ 2025-05-09 10:45 海豚调度 阅读(90) 评论(0) 推荐(0)
HTTP接口数据也能定时同步入湖？用DolphinScheduler×SeaTunnel快速搞定！
摘要：背景与目标 我们之前曾评估使用过SeaTunnel做CDC入湖验证：SeaTunnel-CDC入湖实践，这些场景都是能直连数据库的场景，业务需求中经常会出现无法直连数据库做CDC进行数据同步的场景，而这些场景就需要使用API进行数据对接，用Apache DolphinScheduler定时同步数据。 阅读全文
posted @ 2025-05-09 10:12 海豚调度 阅读(593) 评论(0) 推荐(0)