海豚调度 - 博客园

2024年6月

摘要：在大数据调度系统中，，大家可能会碰到任务实例状态更新不及时的情况。对于Apache DolphinScheduler用户来说，这可能意味着前端显示的任务状态与实际情况不一致，即使任务已经在后台停止运行，前端仍显示为“正在运行”。这种现象不仅影响监控和管理，还可能导致后续任务调度出现问题。那么，当阅读全文

posted @ 2024-06-13 16:36 海豚调度阅读(1608) 评论(0) 推荐(0)

DophinScheduler 如何定期删除日志实例？

摘要：转载自东华果汁哥 Apache DophinScheduler 运行一段时间后，实例调度日志越来越多，需要定期清理。 SQL 错误 [1701] [42000]: Cannot truncate a table referenced in a foreign key constraint (`dol 阅读全文

posted @ 2024-06-12 11:18 海豚调度阅读(305) 评论(0) 推荐(0)

一文搞懂DevOps、DataOps、MLOps、AIOps：所有“Ops”的比较

摘要：引言近年来，“Ops”一词在 IT 运维领域的使用迅速增加。IT 运维正在向自动化过程转变，以改善客户交付。传统的应用程序开发采用 DevOps 实施持续集成（CI）和持续部署（CD）。但对于数据密集型的机器学习和人工智能（AI）应用，精确的交付和部署过程可能并不适用。本文将定义不同的“Ops” 阅读全文

posted @ 2024-06-07 14:03 海豚调度阅读(2047) 评论(0) 推荐(0)

【入门教程】5分钟教你快速学会集成Java springboot ~

摘要：介绍 Apache DolphinScheduler是一个分布式易扩展的开源分布式调度系统，支持海量数据处理，具有任务流程调度、任务流程编排、任务监控告警、工作流引擎等功能。本文将介绍如何将Apache DolphinScheduler集成到 Java Springboot 项目中，以实现更灵活和阅读全文

posted @ 2024-06-06 18:05 海豚调度阅读(477) 评论(0) 推荐(0)

Apache DolphinScheduler 社区5月月报更新！

摘要：各位热爱 DolphinScheduler 的小伙伴们，社区5月份月报更新啦！这里将记录 DolphinScheduler 社区每月的重要更新，欢迎关注，期待下个月你也登上Merge Star月度榜单哦~ 月度Merge Star 感谢以下小伙伴5月份为 Apache DolphinSchedule 阅读全文

posted @ 2024-06-04 15:00 海豚调度阅读(90) 评论(0) 推荐(0)

2024年5月

Dolphinscheduler不重启加载Oracle驱动

摘要：转载自刘茫茫看山问题背景某天我们的租户反馈数据库连接缺少必要的驱动，我们通过日志查看确实是缺少部分数据库的驱动，因为DolphinScheduler默认只带了Oracle和MySQL的驱动，并且需要将pom文件中的test模式去掉才可以在打包的时候引入。我们的任务量比较大，在3.0存在容错机制的阅读全文

posted @ 2024-05-28 15:32 海豚调度阅读(339) 评论(0) 推荐(0)

Apache DolphinScheduler(2.x和3.x版本) 本地环境搭建教程一览

摘要：在迅速变化的技术领域，本地环境的搭建和调试对于软件开发的效率和效果至关重要。本文将详细介绍如何为Apache DolphinScheduler搭建一个高效的本地开发环境，包括2.x和3.x版本的设置方法。无论您是初学者还是有经验的开发者，本指南都将帮助您快速启动并运行，有效地进行本地代码调试。依阅读全文

posted @ 2024-05-27 11:43 海豚调度阅读(962) 评论(0) 推荐(0)

构建无服务器数仓（三）EMR Serverless 操作要点、优化以及开放集成测试

摘要：引言在数据驱动的世界中，企业正在寻求可靠且高性能的解决方案来管理其不断增长的数据需求。本系列博客从一个重视数据安全和合规性的 B2C 金融科技客户的角度来讨论云上云下混合部署的情况下如何利用亚马逊云科技云原生服务、开源社区产品以及第三方工具构建无服务器数据仓库的解耦方法。本篇博客着重探讨 EMR 阅读全文

posted @ 2024-05-23 17:54 海豚调度阅读(150) 评论(0) 推荐(0)

DolphinScheduler 3.3.0版本更新一览

摘要： Apache DolphinScheduler即将迎来3.3.0版本的发布，届时将有一系列重要的更新和改进。在近期的社区5月份用户线上分享会上，项目PMC 阮文俊为大家介绍了3.3.0版本将带来的主要更新和改进，并为大家指出了如何参与社区的方式。什么是DolphinScheduler？ Dolph 阅读全文

posted @ 2024-05-23 16:07 海豚调度阅读(994) 评论(0) 推荐(0)

【最新】别再发邮件了，必须在开源之夏后台申请，50%的人竟然都没有报名成功！

摘要：引言近期我们注意到很多学生朋友通过邮件向导师申请报名，请注意！！！这是无效的，请必须通过“开源之夏”官方后台申请报名，请仔细参考这篇【报名攻略】所以，我们特此举办这次宣讲会，目的是向所有感兴趣的学生详细介绍Apache DolphinScheduler社区在开源之夏中提供的项目，并且解答学生朋阅读全文

posted @ 2024-05-21 12:41 海豚调度阅读(88) 评论(0) 推荐(0)

公告