海豚调度 - 博客园

2026年9月

DolphinScheduler 挂了你不知道？Prometheus + Grafana 监控兜底方案，亲测可用

摘要：你有没有经历过这样的场景：DolphinScheduler 默默挂了半天，任务全部停摆，结果你还在工位上优哉游哉喝咖啡，直到老板冲过来问"数据怎么还没更新"——那一刻，你的表情大概和线上服务一样，卡住了。阅读全文

posted @ 2026-09-02 11:31 海豚调度阅读(5) 评论(0) 推荐(0)

把 Apache DolphinScheduler 变成 Agent 的“手和脚”：从调度平台到自然语言数据入口

摘要：对于企业级数据平台而言，真正的难点并不是让 AI “会聊天”，而是如何让 AI 在生产环境中安全地执行、可靠地验证，并对整个过程进行审计。阅读全文

posted @ 2026-09-02 11:09 海豚调度阅读(10) 评论(0) 推荐(0)

2026年8月

希望你永远用不上：Apache DolphinScheduler 任务阻塞死锁排查与解决方案

摘要：一次 ClickHouse 宕机引发的「血案」：200+ 任务疯狂重试把 CK 打挂，串行等待策略造成死锁，任务动弹不得。本文记录完整的排查过程和终极解决方案。一、事故背景 1.1 事故经过时间线： 2026-02-03：ClickHouse 挂了，DolphinScheduler 任务随之停止阅读全文

posted @ 2026-08-26 18:10 海豚调度阅读(8) 评论(0) 推荐(0)

Apache DolphinScheduler 单机部署实战 | Docker 一把梭，10分钟搞定！

摘要： 📝 摘要：DolphinScheduler 单机模式（Standalone）Docker 部署实战：先对比单机、伪集群、集群三种模式的取舍，再手把手四步搭建——部署 MySQL 并用它替换默认 H2、初始化官方建表 SQL、挂载 MySQL 驱动、docker Compose 启动容器。三个必踩阅读全文

posted @ 2026-08-26 18:00 海豚调度阅读(27) 评论(0) 推荐(0)

在 Ubuntu 上安装 Docker 并运行 Apache DolphinScheduler

摘要：一、背景与选型 1.1 定义 Apache DolphinScheduler 是一个可视化、分布式的大数据工作流任务调度系统。通俗点说，就是用来编排和自动执行你那些复杂ETL任务的“指挥中心”。可以把之前写的各个SQL脚本、Shell 脚本，都拖拽成一个有依赖关系的流程图（DAG），然后设定好时间阅读全文

posted @ 2026-08-19 10:42 海豚调度阅读(24) 评论(0) 推荐(0)

出题带队，共建生态！Apache SeaTunnel 开源之夏 2026 火热招募中

摘要： AI 编程能力正在以前所未有的速度发展，也正在重新定义开源软件的开发、协作与维护方式。面对下一代人机协作的技术浪潮，开源贡献模式也迎来了新的变化。开源之夏 2026 全新启航，正式迈入“点亮计划 2.0”时代！今年，Apache DolphinScheduler 将继续参与开源之夏经典模式，诚邀社阅读全文

posted @ 2026-08-18 18:23 海豚调度阅读(10) 评论(0) 推荐(0)

Apache DolphinScheduler 任务组资源被长时间占用时，怎样让系统自动回收槽位？

摘要： Apache DolphinScheduler 本身并没有针对任务组槽位设计"超时强制回收"的功能；它的"自动回收"机制其实是一致性纠正 + 正常释放 + 强制启动三种手段的组合，全部由 TaskGroupCoordinator 后台线程周期性执行完成。如果要解决任务组资源被长时间占用时，想要让系阅读全文

posted @ 2026-08-18 17:59 海豚调度阅读(15) 评论(0) 推荐(0)

能否依托 Apache DolphinScheduler 打造可信可审计的对话式数据 Agent？

摘要：大模型浪潮下，如何让数据工作流走向智能化？阅读全文

posted @ 2026-08-14 10:07 海豚调度阅读(8) 评论(0) 推荐(0)

DAG 最大并发 100，到底是 100 个流程还是 100 个任务同时跑？

摘要： Apache DolphinScheduler 的并发控制横跨 Master、单个流程实例、Worker 三个层级，用户遇到的绝大多数"并发不达预期"问题，本质上都是没有分清这三层参数各自管的是什么。阅读全文

posted @ 2026-08-12 17:30 海豚调度阅读(6) 评论(0) 推荐(0)

千字拆解 Apache DolphinScheduler 核心脚本：PID 文件、ZK 根节点、环境变量覆盖全讲透

摘要：本文将逐步解析 DolphinScheduler 的关键脚本，希望能提供一个详尽的操作指南，帮助大家掌握安装、配置和操作的每一步。阅读全文

posted @ 2026-08-12 17:20 海豚调度阅读(11) 评论(0) 推荐(0)

公告