海豚调度 - 博客园

2022年8月

摘要：编辑切换为居中添加图片注释，不超过 140 字（可选）大数据是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，而大数据作为企业运转的基础，只有经过提供数据采集、存储、计算、分析、调度、管理、治理等过程，才能为企业所用。而海豚调度作为数据调度工具的先行阅读全文

posted @ 2022-08-10 15:26 海豚调度阅读(192) 评论(0) 推荐(0)

社区动态——恭喜海豚调度中国区用户组新晋 9 枚“社群管理员”

摘要：随着国内开源的迅猛崛起，Apache DolphinScheduler 社区迎来了中国区用户组第一届的社群管理成员。作为海豚调度社区的资深用户，既玩得了调度，也吹得了牛皮，这是怎样的一群大数据工程师呢？今天通过本文，我们来认识下这 9 位小伙伴！用户7群管理员晏江——个人简介大家好，我叫晏江，阅读全文

posted @ 2022-08-10 14:50 海豚调度阅读(152) 评论(0) 推荐(0)

2022年6月

日均 6000+ 实例，TB 级数据流量，Apache DolphinScheduler 如何做联通医疗大数据平台的“顶梁柱”？

摘要：作者 | 胡泽康鄞乐炜作者简介胡泽康联通（广东）产业互联网公司大数据工程师，专注于开源大数据领域，从事大数据平台研发工作鄞乐炜联通（广东）产业互联网公司大数据工程师，主要从事大数据平台的应用与引擎端开发 01 背景介绍我们是联通医疗团队，一直践行 “服务医改，惠及民生” 的使命，全阅读全文

posted @ 2022-06-30 15:48 海豚调度阅读(701) 评论(0) 推荐(0)

数据平台调度升级改造 | 从Azkaban 平滑过度到 Apache DolphinScheduler 的操作实践

摘要： Fordeal的数据平台调度系统之前是基于Azkaban进行二次开发的，但是在用户层面、技术层面都存在一些痛点问题难以被解决。比如在用户层面缺少任务可视化编辑界面、补数等必要功能，导致用户上手难体验差。在技术层面，架构过时，持续迭代难度大。基于这些情况，经过竞品对比和调研后，Fordeal数据平台新阅读全文

posted @ 2022-06-20 12:06 海豚调度阅读(698) 评论(0) 推荐(0)

倒计时2日！基于 Apache DolphinScheduler&TiDB 的交叉开发实践，从编写到调度让你大幅提升效率

摘要：当大数据挖掘成为企业赖以生存、发展乃至转型的生命，如何找到一款好软件帮助企业满足需求，成为了许多大数据工程师困扰的问题。但在当下高速发展的大数据领域，光是一款好软件似乎都不足以满足所有场景业务需求，许多企业逐渐将目光转向了技术生态的“外延”——即结合各种场景打造企业适用的技术架构。那该如何才能打造阅读全文

posted @ 2022-06-17 14:25 海豚调度阅读(94) 评论(0) 推荐(0)

感谢有你！Apache DolphinScheduler 项目 GitHub star 突破 8k

摘要：本周伊始，Apache DolphinScheduler 项目在 GitHub 上的 Github Star 总数首次突破 8K。目前，Apache DolphinScheduler 社区已经拥有 Contributor 345+，fork 数 3k+，社区发展呈现出一片欣欣向荣。既 Apache 阅读全文

posted @ 2022-06-16 17:05 海豚调度阅读(168) 评论(0) 推荐(0)

大数据平台迁移实践 | Apache DolphinScheduler 在当贝大数据环境中的应用

摘要：大家下午好，我是来自当贝网络科技大数据平台的基础开发工程师王昱翔，感谢社区的邀请来参与这次分享，关于 Apache DolphinScheduler 在当贝网络科技大数据环境中的应用。本次演讲主要包含四个部分：平台建设的背景大数据平台重构大数据调度平台建设下一步规划王昱翔当贝大数据平阅读全文

posted @ 2022-06-15 17:32 海豚调度阅读(518) 评论(0) 推荐(0)

Apache Dolphinscheduler3.0.0-beta-1 版本发布，新增FlinkSQL、Zeppelin任务类型

摘要：导读：近日，Apache Dolphin Scheduler 迎来了 3.0.0-beta-1 版本的正式发布。新版本主要针对 3.0.0-alpha 进行了代码和文档的修复，并引入了部分的功能，如支持 FlinkSQL 任务类型，新增 Zeppelin 任务类型，新增 Kubernetes nam 阅读全文

posted @ 2022-06-15 15:54 海豚调度阅读(347) 评论(0) 推荐(0)

Apache DolphinScheduler&TiDB联合Meetup | 聚焦开源生态发展下的应用开发能力

摘要：在软件开发领域有一个流行的原则：Don’t Repeat Yourself(DRY)，翻译过来就是：不要重复造轮子。而开源项目最基本的目的，其实就是为了不让大家重复造轮子。尤其是在大数据这样一个高速发展的领域，现在各类企业都有使用大量的开源软件，当发现开源项目不能满足场景业务需求的时候，越来越多的阅读全文

posted @ 2022-06-06 14:10 海豚调度阅读(176) 评论(0) 推荐(0)

2022年5月

达人专栏 | 还不会用 Apache Dolphinscheduler？大佬用时一个月写出的最全入门教程【三】

摘要：作者 | 欧阳涛招联金融大数据开发工程师 02 Master启动流程 2.10 WorkFlowExecutorThread 里执行 Submit StandByTask 方法 SubmitStandByTask干了5件事情：从ReadyToSubmitTaskQueue中取出TaskInsta 阅读全文

posted @ 2022-05-25 17:00 海豚调度阅读(597) 评论(0) 推荐(0)

公告