海豚调度 - 博客园

2024年3月

摘要：在用Apache SeaTunnel研发SM2加密组件过程中，发现社区关于本地调试SeaTunnel文章过于简单，很多情况没有说明，于是根据自己遇到问题总结这篇文档。SeaTunnel本地调试官方文档，希望对大家有所帮助！使用的引擎为Flink(不需要下载，SeaTunnel中有加载依赖),输入输阅读全文

posted @ 2024-03-20 17:37 海豚调度阅读(136) 评论(0) 推荐(0) 编辑

【故障排查】10分钟解决Quartz重复调度的疑难杂症

摘要：我司使用Apache DolphinScheduler作为调度框架很久了，感兴趣的小伙伴可以看看这些干货文章：因为之前监控到会出现重复的调度的问题，所以此文记录排查重复调度问题的全过程，希望对社区其他的小伙伴能够起到抛砖引玉的作用！注：本文使用的DolphinScheduler 3.1.1的版本阅读全文

posted @ 2024-03-18 16:27 海豚调度阅读(152) 评论(0) 推荐(0) 编辑

Apache DolphinScheduler-3.2.0集群部署教程

摘要：集群部署方案(2 Master + 3 Worker) Apache DolphinScheduler官网：https://dolphinscheduler.apache.org/zh-cn Apache DolphinScheduler使用文档：https://dolphinscheduler.a 阅读全文

posted @ 2024-03-11 15:16 海豚调度阅读(706) 评论(0) 推荐(0) 编辑

Apache SeaTunnel 及 Web 功能部署指南(小白版)

摘要：在大数据处理领域，Apache SeaTunnel 已成为一款备受青睐的开源数据集成平台，它不仅可以基于Apache Spark和Flink，而且还有社区单独开发专属数据集成的Zeta引擎，提供了强大的数据处理能力。随着SeaTunnel Web的推出，用户界面(UI)操作变得更加友好，项目部署和管阅读全文

posted @ 2024-03-01 08:55 海豚调度阅读(705) 评论(0) 推荐(0) 编辑

2024年2月

白鲸开源科技与瀚高基础软件完成产品兼容性认证，开启数据管理新篇章

摘要：北京白鲸开源科技有限公司（以下简称“白鲸开源”）今日宣布，其旗舰产品WhaleStudio套件已与瀚高基础软件股份有限公司（以下简称“瀚高软件”）旗下的IvorySQL数据库管理系统V3.0完成深度兼容性认证。此次合作标志着两家领军企业在数据管理领域的紧密联合，为用户提供更加稳定、高效的数据处理解决阅读全文

posted @ 2024-02-27 15:37 海豚调度阅读(27) 评论(0) 推荐(0) 编辑

2024年Apache DolphinScheduler RoadMap：引领开源调度系统的未来

摘要：非常欢迎大家来到Apache DolphinScheduler社区！随着开源技术在全球范围内的快速发展，社区的贡献者 “同仁” 一直致力于构建一个强大而活跃的开源调度系统社区，为用户提供高效、可靠的任务调度和工作流管理解决方案。在过去的一段时间里，我们取得了一些重要的成就，但我们的愿景远未实现。为阅读全文

posted @ 2024-02-26 16:47 海豚调度阅读(98) 评论(0) 推荐(0) 编辑

Apache DolphinScheduler 3.2.1 版本发布：增强功能与安全性的全面升级

摘要：近期，Apache DolphinScheduler 社区激动地宣布 3.2.1 版本的发布。此次更新不仅着力解决了前一版本（3.2.0）中遗留的问题，而且引入了一系列的功能增强和优化措施。原先的问题主要源于部分重要代码在发布过程中未能成功合并（cherry-pick），加之这部分代码的合并过程较阅读全文

posted @ 2024-02-21 10:15 海豚调度阅读(278) 评论(2) 推荐(0) 编辑

Apache DolphinScheduler数仓任务管理规范

摘要：前言：大数据领域对多种任务都有调度需求，以离线数仓的任务应用最多，许多团队在调研开源产品后，选择Apache DolphinScheduler（以下简称DS）作为调度场景的技术选型。得益于DS优秀的特性，在对数仓任务做运维和管理的时候，往往比较随意，或将所有任务节点写到一个工作流里，或将每个逻辑节阅读全文

posted @ 2024-02-19 15:50 海豚调度阅读(193) 评论(0) 推荐(0) 编辑

Apache DolphinScheduler中ZooKeeperCDH不兼容问题的解决方案

摘要：背景看到Apache DolphinScheduler社区群有很多用户反馈和讨论这块问题，针对不兼容的问题，不仅需要自己重新编译各一个新包，而且因为默认是使用zk-3.8的配置，所以会出现不兼容问题。使用zk-3.4配置即可适配3.4.x 解决办法（一）切换到项目源码的根路径中执行 mvn cl 阅读全文

posted @ 2024-02-18 12:11 海豚调度阅读(92) 评论(0) 推荐(0) 编辑

【兼容认证】白鲸开源与银河麒麟高级服务器操作系统成功通过测试

摘要： 2024年1月2日，北京白鲸开源科技有限公司（以下简称"白鲸开源"）荣幸宣布，白鲸开源旗下产品 WhaleStudio V2.4 已成功通过与麒麟软件有限公司旗下的银河麒麟高级服务器操作系统产品的兼容性测试。麒麟软件有限公司的银河麒麟高级服务器操作系统(飞腾版)V10和银河麒麟高级服务器操作系统( 阅读全文

posted @ 2024-02-01 10:16 海豚调度阅读(27) 评论(0) 推荐(0) 编辑

公告