海豚调度 - 博客园

2024年9月

Apache DolphinScheduler在Cisco Webex的应用与优化实践

摘要：引言我叫李庆旺，是Cisco Webex的一名软件工程师，同时也是Apache DolphinScheduler（以下简称DS）的Committer。在过去的两年里，公司基于Apache DolphinScheduler进行了多项持续改进和创新，以更好地适应我们的业务需求。本文将介绍这些改进的具阅读全文

posted @ 2024-09-04 14:43 海豚调度阅读(98) 评论(0) 推荐(0)

我们总该选择滚烫的人生 | Apache DolphinScheduler社区讲师招募中

摘要：亲爱的社区小伙伴们，Apache DolphinScheduler 线上 Meetup 讲师&议题火热征集中！如果你热爱开源，对大数据调度有着深厚的兴趣，并且愿意将你的知识和经验分享给更多人，那么这就是你的舞台！这是一个锻炼自己的机会，让你不仅能够展示自己的技术能力，还能在开源社区中广交朋友。💡 阅读全文

posted @ 2024-09-04 12:08 海豚调度阅读(50) 评论(0) 推荐(0)

Apache DolphinScheduler项目与社区7-8月发展报告

摘要：各位热爱 Apache DolphinScheduler 的小伙伴们，社区7-8月报更新啦！这里将记录 Apache DolphinScheduler 社区每月的重要更新，欢迎关注！ Merge Stars 感谢以下小伙伴上两个月为 Apache DolphinScheduler 项目和社区发展所做阅读全文

posted @ 2024-09-03 16:43 海豚调度阅读(89) 评论(0) 推荐(0)

Apache DolphinScheduler大规模任务调度系统对大数据实时Flink任务支持

摘要：转载自神龙大侠我是用olphinScheduler 3.2.1版本做源代码编译部署（部署方式参考我的另外一篇文档《源代码编译，Apache DolphinScheduler前后端分离部署解决方案》）二进制文件部署本文也适用，只需要修改相对应的配置即可。资源管理底层基座替换成hdfs Flink 阅读全文

posted @ 2024-09-02 16:32 海豚调度阅读(701) 评论(0) 推荐(0)

2024年8月

Apache DolphinScheduler中处理任务/告警/事件相关核心思路曝光

摘要：最近在看Apache DolphineScheduler，发现DolphinScheduler在处理任务时，通过先将任务快速的存储在数据库中，然后基于对应的Task，将Task放入队列中，然后将Task进行快速消费的思路。这种模型在很多框架中，都有体现。我们知道在Master模块时处理任务的核心阅读全文

posted @ 2024-08-28 16:25 海豚调度阅读(404) 评论(0) 推荐(0)

兴业证券基于Apache DolphinScheduler的应用实践

摘要：文 / 兴业证券股份有限公司刘洋石良生柳君李致琪本文来源于网络，如有侵权，请联系删除任务调度平台，扮演着自动执行预设任务的重要角色，是业务开展过程中不可或缺的一环。随着业务规模的不断扩展，兴业证券每日需要进行数以万计的任务调度，因此，优化和提升任务调度平台的性能与稳定性至关重要。本文通过阅读全文

posted @ 2024-08-28 15:21 海豚调度阅读(209) 评论(0) 推荐(0)

AI创新，DataOps聚能 | 白鲸开源DTCC共话DataOps新篇章

摘要：近日，由IT168联合旗下ITPUB、ChinaUnix两大技术社区主办的第15届中国数据库技术大会（DTCC 2024）隆重召开。大会以“自研创新数智未来”为主题，吸引了数百位行业专家和广大数据领域从业者共聚这场年度数据库技术交流盛宴，共同探讨新时代下数据库的技术动态和应用实践。作为全球领先的阅读全文

posted @ 2024-08-27 16:04 海豚调度阅读(96) 评论(0) 推荐(0)

源代码编译，Apache DolphinScheduler前后端分离部署解决方案

摘要：转载自神龙大侠生产环境部署方案在企业线上生产环境中，普遍的做法是至少实施两套环境。测试环境线上环境测试环境用于验证代码的正确性，当测试环境验证ok后才会部署线上环境。鉴于CI/CD应用的普遍性，源代码一键部署是必要的。本文是探索对DolphinScheduler源代码改造，构建测试，线阅读全文

posted @ 2024-08-27 11:10 海豚调度阅读(997) 评论(0) 推荐(0)

从零到一，全面掌握Apache DolphinScheduler发版流程，实战派经验分享！

摘要：引言 Apache DolphinScheduler的发版流程对于确保软件质量和社区协作至关重要，社区Committer王兴杰为我们详细介绍了Apache DolphinScheduler的发版流程，包括环境准备、流程文档、基础工具准备、依赖包确认等关键步骤，并指出了发版流程中可能会遇到的麻烦以及相阅读全文

posted @ 2024-08-21 15:23 海豚调度阅读(190) 评论(0) 推荐(0)

猪脸识别、自动投喂！Apache DolphinScheduler还能做这些？

摘要：数字化转型提速中！传统农牧食品行业也寻求搭上数字化转型的快车，通过物联网、大数据、人工智能等现代信息技术，实现生产、加工、流通等环节的智能化和自动化，提高生产效率、优化资源配置、提升产品质量，并满足消费者对食品安全和可追溯性的需求。在数字化浪潮的推动下，铁骑力士集团作为一家历史悠久的农牧食品企业，阅读全文

posted @ 2024-08-13 15:39 海豚调度阅读(181) 评论(0) 推荐(0)

公告