摘要：
作者 | 欧阳涛 招联金融大数据开发工程师 02 Master启动流程 2.10 WorkFlowExecutorThread 里执行 Submit StandByTask 方法 SubmitStandByTask干了5件事情： 从ReadyToSubmitTaskQueue中取出TaskInsta 阅读全文
posted @ 2022-05-25 17:00
海豚调度
阅读(554)
评论(0)
推荐(0)
摘要：
当今许多企业都有着技术架构的DataOps程度不够、二次开发成本高、迁移成本高、集群部署混乱等情况，团队在技术选型之后发现并不适合自己的需求，但是迁移成本和难度又比较大，甚至前团队还留下了不少坑，企业自有的开发能力又比较有限，导致后面的小伙伴上手难度高体验差。 俗话说“工具选得好，下班回家早；调度用 阅读全文
posted @ 2022-05-25 10:29
海豚调度
阅读(202)
评论(0)
推荐(0)
摘要：
02 Master启动流程 2.1 MasterServer的启动 在正式开始前，笔者想先鼓励一下大家。我们知道启动Master其实就是启动MasterServer，本质上与其他SpringBoot项目相似，即启动里面的main函数。但想要开始实操前，肯定有不少的人，尤其是初学者会突然发现这里面有十 阅读全文
posted @ 2022-05-19 17:34
海豚调度
阅读(308)
评论(0)
推荐(0)
摘要：
在新网银行，每天都有大量的任务实例产生，其中实时任务占据多数。为了更好地处理任务实例，新网银行在综合考虑之后，选择使用 Apache DolphinScheduler 来完成这项挑战。如今，新网银行多个项目已经完成了实时与准实时的跑批，指标管理系统的离线跑批，应用于离线数据开发和任务调度、准实时数据 阅读全文
posted @ 2022-05-17 14:18
海豚调度
阅读(512)
评论(0)
推荐(0)
摘要：
又是一年【开源之夏】季。今年，Apache DolphinScheduler 同样参与到了【开源之夏】活动中来，希望有更多学生群体关注到 Apache DolphinScheduler，并踊跃参与项目共建拿奖金！ No.1 活动介绍 开源之夏是由“开源软件供应链点亮计划”发起并长期支持的一项暑期开源 阅读全文
posted @ 2022-05-13 17:06
海豚调度
阅读(198)
评论(0)
推荐(0)
摘要：
2022年1月，科学技术部高新技术司副司长梅建平在“第六届中国新金融高峰论坛”上表示，当前数据量已经大大超过了处理能力的上限，若信息技术仍然是渐进式发展，则数据处理能力的提升将远远落后于指数级增长的数据量。因此，在一段时期内，数据处理能力与效率的提升仍将是大数据发展要面对的技术难点。 随着5G、物联 阅读全文
posted @ 2022-05-11 15:39
海豚调度
阅读(502)
评论(0)
推荐(0)
摘要：
截止2022年，中国联通用户规模达到4.6亿，占据了全中国人口的30%，随着5G的推广普及，运营商IT系统普遍面临着海量用户、海量话单、多样化业务、组网模式等一系列变革的冲击。 当前，联通每天处理话单量超过400亿条。在这样的体量基础上，提高服务水平，为客户提供更有针对性的服务，也成为了联通品牌追求 阅读全文
posted @ 2022-05-07 15:04
海豚调度
阅读(526)
评论(0)
推荐(0)
浙公网安备 33010602011771号