海豚调度 - 博客园

2021年8月

摘要：今天给大家带来的分享是基于 Apache DolphinScheduler 的持续集成方向实践，分享的内容主要为以下六点： “ 研发效能DolphinScheduler CI/CD 应用案例DolphinScheduler 平台下的Serverless 理... 阅读全文

posted @ 2021-08-31 08:00 海豚调度阅读(460) 评论(0) 推荐(0)

摘要：今天给大家带来的分享是基于 Apache DolphinScheduler 的数据质量检查实践，分享的内容主要为以下四点： “ 为什么要做数据质量检查？为什么要基于 DolphinScheduler 做数据质量检查？基于 DolphinSchedul... 阅读全文

posted @ 2021-08-26 10:18 海豚调度阅读(3789) 评论(0) 推荐(0)

摘要：关于「The Data Way」「The Data Way」是由 SphereEx 公司出品的一档播客节目。这里有开源、数据、技术的故事，同时我们关注开发者的工作日常，也讨论开发者的生活日常；我们聚焦开源，也鼓励开发者积极拥抱开源以外的多彩生活。这些，都... 阅读全文

posted @ 2021-08-17 08:30 海豚调度阅读(56) 评论(0) 推荐(0)

摘要：介绍一下我自己目前就职于eBay中国，专注于微服务中间件，分布式架构等领域，同时也是狂热的开源爱好者。如何成为一个commiter 过去几个月，我一直持续在为 Apache DolphinScheduler 项目贡献，也在最近收到了社... 阅读全文

posted @ 2021-08-04 18:10 海豚调度阅读(105) 评论(0) 推荐(0)

2021年7月

摘要：背景大数据发展到今天已有 10 年时间，早已渗透到各个行业，数据需求越来越多，这使得大数据业务间的依赖关系也越来越复杂，另外也相信做数据的伙伴肯定对如何治理数据也是痛苦之至，再加上现今云原生时代的要求，怎么能更好、更容易的处理大数据任务关系及更好的实... 阅读全文

posted @ 2021-07-30 09:57 海豚调度阅读(155) 评论(0) 推荐(0)

摘要：导语：Yuanhao Ji 同学是《暑期 2021 - API 模块 UT 测试问题解决》项目负责人，本文记录了他是如何排查和定位问题。 1. 背景问题：在部分 UT 中使用 PowerMock 后，导致 Sonar 不能获取对应的测试报告。大概... 阅读全文

posted @ 2021-07-22 07:30 海豚调度阅读(276) 评论(0) 推荐(0)

摘要：引言来自 eBay 的文俊同学在近期的上海开源大数据 Meetup 上做了十分精彩的 “Apache DolphinScheduler 的架构演进” 分享。本次分享有近 200 人参与，在线观看次数超过 2,500 次图为现场分享视频请参见 Ap... 阅读全文

posted @ 2021-07-20 10:00 海豚调度阅读(493) 评论(0) 推荐(0)

摘要： Apache 孵化器即为想要进入 Apache 软件基金会（ASF）的项目提供相关帮助和服务。它帮助进入的项目（称为“podling”）采用 Apache 的治理风格，并引导使用 ASF 服务，以成为顶级 ASF 项目（“TLPs”）。孵化器创建于 2... 阅读全文

posted @ 2021-07-13 20:41 海豚调度阅读(315) 评论(0) 推荐(0)

摘要：伴鱼技术团队是一群崇尚简单与极致效率的工程师组成的~ 伴鱼少儿英语是目前飞速成长的互联网在线英语教育品牌，期望打造更创新、更酷、让学英语更有效的新一代互联网产品。（博客官网：https://tech.ipalfish.com/blog/）日常工作... 阅读全文

posted @ 2021-07-01 09:00 海豚调度阅读(629) 评论(0) 推荐(0)

2021年6月

摘要： DolphinScheduler是什么？ Apache DolphinScheduler 是一个分布式、易扩展并带有强大的可视化界面的大数据工作流调度系统。 2021 年 03 月 18 日正式成为 Apache 顶级项目，是首个由国人主导并贡献到 A... 阅读全文

posted @ 2021-06-29 20:50 海豚调度阅读(153) 评论(0) 推荐(0)