海豚调度 - 博客园

2025年2月

摘要： Apache DolphinScheduler 非常适用于实时数据处理场景，尤其是与 Apache Flink 的集成。DolphinScheduler 提供了丰富的功能，包括任务依赖管理、动态调度、实时监控和日志管理，能够有效简化 Flink 实时任务的管理和部署。通过 DolphinSchedu 阅读全文

posted @ 2025-02-07 11:35 海豚调度阅读(1277) 评论(0) 推荐(0)

2025开年进展，DolphinScheduler社区1月份报告来了！

摘要：各位热爱DolphinScheduler的小伙伴们，新年新气象，今年1月份的社区月报如期而至，请查收！这里将更新DolphinScheduler项目和社区每月的重大进展，敬请关注。 DolphinScheduler月度Merge Stars 感谢以下小伙伴上个月为 Apache DolphinSc 阅读全文

posted @ 2025-02-06 15:53 海豚调度阅读(82) 评论(0) 推荐(0)

2025年1月

DolphinScheduler接口实操（二）：如何寻找接口

摘要：转载自风_间上一篇写了《DolphinScheduler接口实操（一）：利用接口实现高效批量工作流导入及脚本上线》，通过DolphinScheduler的一些接口来实现导入-上线工作流，那么DolphinScheduler的接口应该怎么找呢？在此简单总结一篇。接下来以手动执行一次工作流为例。寻阅读全文

posted @ 2025-01-23 10:42 海豚调度阅读(307) 评论(0) 推荐(0)

用户案例 | 某商业银行引入白鲸调度系统实现系统升级与业务场景深度支持

摘要：导读某地方性股份制商业银行主要提供个人金融、公司金融、国际金融等方面的业务，承担着大量的金融数据处理与分析任务。这些任务对于确保银行的运营效率、风险管理和客户服务至关重要。过去，该银行一直依赖自建的调度系统来管理和协调这些数据任务，确保数据的准确性和及时性。然而，随着业务的不断扩展和数据量的急剧增阅读全文

posted @ 2025-01-22 16:06 海豚调度阅读(128) 评论(0) 推荐(0)

高效批量工作流导入及脚本上线，利用DolphinScheduler接口轻松实现

摘要：实现了批量生成DolphinScheduler的任务，当导入时发现只能逐个导入，因此通过接口实现会更方便。 DolphinScheduler接口文档 DolphinScheduler是有接口文档的，地址是 http://IP:12345/dolphinscheduler/swagger-ui/ind 阅读全文

posted @ 2025-01-22 14:22 海豚调度阅读(395) 评论(0) 推荐(0)

小红书已被TikTok“难民”攻占！谁能接住这泼天富贵？

摘要：谁都不会想到，美国即将对Tiktok发出的禁令会让故事发生这样的转向，小红书竟成最后“赢家”。小红书首页的“国际范” 一夜之间，小红书的首页被大量英文帖子“攻占”。中国网友纷纷表示：“一觉醒来，我成外国人了？”。这些新用户自称“TikTok难民”，并迅速在小红书上开设账号，上传内容，分享生活点滴、阅读全文

posted @ 2025-01-16 14:39 海豚调度阅读(174) 评论(0) 推荐(0)

DolphinScheduler项目管理页面加载缓慢？这样优化

摘要：问题现象有时候，Apache DolphinScheduler项目管理页面会发生加载不出来的问题，浏览器查看为[http://ip:12345/dolphinscheduler/projects?pageSize=10&pageNo=1&searchVal=]请求超时。解决思路查看海豚运行日志阅读全文

posted @ 2025-01-15 14:22 海豚调度阅读(268) 评论(0) 推荐(0)

王炸组合：Dolphinscheudler 3.1.*搭配SeaT unnel2.3.*高效完成异构数据数据集成

摘要：概述本篇主要介绍如何通过Dolphinscheduler海豚调度搭配Seatunnel完成异构数据源之间的数据同步功能，这个在大数据流批一体数仓建设的过程中是一个非常好的解决方案，稳定高效，只要用上了你肯定爱不释手。环境准备 dolphinscheduler集群 >= 3.1.5 dolphi 阅读全文

posted @ 2025-01-14 17:43 海豚调度阅读(1076) 评论(0) 推荐(0)

DolphinScheduler自身容错导致的服务器持续崩溃重大问题的排查与解决

摘要： 01 问题复现在DolphinScheduler中有如下一个Shell任务： current_timestamp() { date +"%Y-%m-%d %H:%M:%S" } TIMESTAMP=$(current_timestamp) echo $TIMESTAMP sleep 60 在Dol 阅读全文

posted @ 2025-01-10 09:57 海豚调度阅读(1527) 评论(1) 推荐(0)

化工巨头的选择：惠生工程如何用DolphinScheduler点燃数据集成新火花

摘要：在数字化转型的大潮中，企业面临着数据爆炸性增长的挑战。如何有效地整合和管理来自不同来源的数据，成为企业提升竞争力的关键。本文将详细介绍惠生工程（中国）基于Apache DolphinScheduler的多源数据集成实践解决方案，包括背景介绍、痛点分析、调度策略设计、关键技术方案以及运维管理经验总结等阅读全文

posted @ 2025-01-09 14:59 海豚调度阅读(167) 评论(0) 推荐(0)

公告