海豚调度 - 博客园

2025年8月

使用 Apache DolphinScheduler 构建和部署大数据平台，将任务提交至 AWS 的实践经验

摘要：通过这些改进，我们期望能够帮助用户使用Apache DolphinScheduler更有效地部署和管理他们的作业，无论是在Webex DC还是在EKS上，同时提高资源管理的效率和安全性。阅读全文

posted @ 2025-08-06 15:22 海豚调度阅读(75) 评论(0) 推荐(0)

日均处理 PB 级数据，基于 DolphinScheduler 的离线数据治理平台实现精准血缘追踪

摘要：本文介绍了基于 DolphinScheduler 的离线数据治理平台，解决了任务依赖黑洞和扩展性瓶颈问题。通过 YAML 动态编译和血缘自动捕获，实现了高效的任务依赖管理和数据追踪。平台使用 Neo4j 图数据库进行血缘存储，支持秒级影响分析和根因定位。此外，结合自研高性能导入工具，大幅提升数据传输效率。阅读全文

posted @ 2025-08-06 15:09 海豚调度阅读(124) 评论(0) 推荐(0)

Apache DolphinScheduler DataX 数据集成：新手入门全攻略

摘要：在调研了 DolphinScheduler 之后，在项目上实际使用了一段时间，有了一些使用Datax做数据集成的实际经验，分享如下。阅读全文

posted @ 2025-08-06 14:55 海豚调度阅读(974) 评论(0) 推荐(0)

2025年7月

新手教程：用外部 PostgreSQL 和 Zookeeper 启动 Dolphinscheduler

摘要：本文将带你一步步通过外部PostgreSQL和Zookeeper来启动Apache DolphinScheduler。阅读全文

posted @ 2025-07-31 16:29 海豚调度阅读(125) 评论(0) 推荐(0)

一文教会你基于 Rainbond 部署 DolphinScheduler 高可用集群

摘要：本文描述通过 Rainbond 云原生应用管理平台一键部署高可用的 DolphinScheduler 集群，这种方式适合给不太了解 Kubernetes、容器化等复杂技术的用户使用，降低了在 Kubernetes 中部署 DolphinScheduler 的门槛。阅读全文

posted @ 2025-07-31 16:19 海豚调度阅读(122) 评论(0) 推荐(0)

【直播预约】天翼云如何通过 DolphinScheduler 实现大数据自动化与全链路血缘，探索实践亮点！