摘要:
随着企业数据规模的快速增长,传统物理机或虚拟机部署Apache DolphinScheduler面临着环境配置复杂、资源利用率低、扩展性差等痛点。特别是在需要运行Spark等大数据计算任务时,手动维护多套环境、处理依赖冲突、应对突发流量等问题更是让运维团队疲于奔命。 阅读全文
posted @ 2026-07-22 10:52
海豚调度
阅读(17)
评论(0)
推荐(0)
摘要:
今年我在旧金山连续参加完 Databricks Summit 2026 和 Snowflake Summit 2026,我的整体感觉是如果你还把它们理解成一个做湖仓、一个做云数仓,那你基本 Out 了。这两家公司都在往上长,想从“存数据、算数据的地方”,长到未来企业 AI 里那个更值钱的位置。 最有 阅读全文
posted @ 2026-07-20 18:25
海豚调度
阅读(24)
评论(0)
推荐(0)
摘要:
在DolphinScheduler运行过程中,有时会出现任务界面显示"运行中"状态,但实际进程已经死亡的情况。这种状态不一致会导致工作流无法正常推进,需要手动干预。本文将针对不同版本提供安全清理方案。 阅读全文
posted @ 2026-07-16 15:45
海豚调度
阅读(22)
评论(0)
推荐(0)
摘要:
社区朋友们,今年 6 月份的社区月报来啦!不同于常规月度大版本功能迭代,本月 Apache DolphinScheduler 社区全力深耕底层治理!小伙伴们重点打磨了平台稳定性,比如完成 3.4.2 版本运维闭环、优化任务故障转移能力、修复高并发偶发故障、落地日志敏感数据脱敏,补齐部署、存储、CI 工程等各类线上细碎短板。 阅读全文
posted @ 2026-07-10 16:49
海豚调度
阅读(29)
评论(0)
推荐(0)
摘要:
SuperSonic 是腾讯音乐开源的下一代 AI+BI 平台,统一了 Chat BI(由 LLM 驱动)和 Headless BI(由语义层驱动)两种范式。 阅读全文
posted @ 2026-07-10 15:33
海豚调度
阅读(31)
评论(0)
推荐(0)
摘要:
在分布式调度系统的架构设计中,注册中心的选择往往决定了系统的复杂度和运维成本。Apache DolphinScheduler作为一款成熟的分布式工作流调度系统,虽然默认使用ZooKeeper作为注册中心,但已经提供了多种替代方案,让用户可以根据自身技术栈和运维能力做出灵活选择。 阅读全文
posted @ 2026-07-01 16:43
海豚调度
阅读(45)
评论(0)
推荐(0)
摘要:
已经在虚拟机部署好Apache DolphinScheduler了,想尝试下在Flink新建一个Flink节点,然后用Flink消费Kafka数据。 阅读全文
posted @ 2026-07-01 16:23
海豚调度
阅读(21)
评论(0)
推荐(0)
浙公网安备 33010602011771号