摘要: 每年一度的 Apache 北美大会因为疫情的原因转到线上来举行了, 这次会议的主题是 ApacheCon@Home, 也就是说借助网络我们可以足不出户就可以参加 Apache 大会了。今年的会议为了针对不同的地域特点,特地安排了不同时间段的演讲,同时还专... 阅读全文
posted @ 2020-09-22 08:20 海豚调度 阅读(102) 评论(0) 推荐(0)
摘要: 点击上方蓝字关注DolphinScheduler(海豚调度) 背景 随着大数据时代的到来,流动的数据已经成为连接全世界的载体,也成为促进经济社会发展、便利人们产生生活的源动力。伴随着数据的流动,尤其是为了解决流动过程中产生的一系列问题,... 阅读全文
posted @ 2020-09-20 15:18 海豚调度 阅读(703) 评论(0) 推荐(0)
摘要: 关于 Apache DolphinScheduler: “ Apache DolphinScheduler(Incubating) 是一个分布式去中心化、易扩展的可视化工作流任务调度系统,致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在大数据处理流... 阅读全文
posted @ 2020-09-20 15:18 海豚调度 阅读(76) 评论(0) 推荐(0)
摘要: 点击上方蓝字关注DolphinScheduler(海豚调度) 背景 据说,英语中元数据meta一词最早出现于1968年,其是对希腊语前缀"meta-"的粗略翻译,用于表明更抽象层次的事物。尽管元数据一词只有几十年的历史,然而几千年的图书... 阅读全文
posted @ 2020-09-18 09:44 海豚调度 阅读(464) 评论(0) 推荐(0)
摘要: 点击蓝色字关注! 本篇文章大概8440字,阅读时间大约20分钟 本文记录了在CDH5.16.2集群上集成Dolphin Scheduler 1.3.1的详细流程,特别注意一下MySQL数据库的连接串! 1 文档编写目的 详细记录CDH5上Dolphin ... 阅读全文
posted @ 2020-09-16 22:20 海豚调度 阅读(378) 评论(0) 推荐(0)
摘要: Apache DolphinScheduler 社区邮件列表最近通告了 2 个漏洞,考虑到有很多用户并未订阅此邮件列表,我们特地在此进行情况说明: CVE-2020-11974[1] 漏洞 (CVE-2020-11974[1]) 是与 mysql conn... 阅读全文
posted @ 2020-09-15 15:07 海豚调度 阅读(263) 评论(0) 推荐(0)
摘要: 点击上方蓝字关注DolphinScheduler(海豚调度) |作者:鲍亮 |编辑:卢凯瑞 1 名词解释 DAG,全称:Directed Acyclic Graph,中文:有向无环图入度:有向图中某点作为图中边的终点的次数之和出度:对于有向图来说,顶点... 阅读全文
posted @ 2020-09-14 10:37 海豚调度 阅读(286) 评论(0) 推荐(0)
摘要: 点击上方蓝字关注DolphinScheduler(海豚调度) |作者:代立冬 |编辑:闫利帅 回顾基础知识: 图的遍历 图的遍历是指从图中的某一个顶点出发,按照某种搜索方法沿着图中的边对图中的所有顶点访问一次且仅访问一次。 ... 阅读全文
posted @ 2020-09-11 09:00 海豚调度 阅读(436) 评论(0) 推荐(0)
摘要: 本文是基于1.2.0版本进行分析,与最新版本的实现有一些出入,还请读者辩证的看待本源码分析。具体细节可能描述的不是很准确,仅供参考。 1.源码版本 DolphinScheduler-1.2.0版本 2.技术框架 所有模块均采用比... 阅读全文
posted @ 2020-09-10 07:27 海豚调度 阅读(714) 评论(0) 推荐(0)
摘要: 各位 DolphinScheduler 和 Pulsar 社区的小伙伴们,Apache DolphinScheduler x Pulsar 在线 Meetup 来啦! 导语 大数据任务调度、消息流的订阅与分发都是大数据建设中极其重要的 “基础设施”。高稳... 阅读全文
posted @ 2020-09-02 19:20 海豚调度 阅读(54) 评论(0) 推荐(0)