随笔分类 -  spark

摘要:https://blog.csdn.net/oTengYue/article/details/104988116 阅读全文
posted @ 2021-04-19 17:15 Szz 阅读(49) 评论(0) 推荐(0)
摘要:https://blog.csdn.net/oTengYue/article/details/105339515 阅读全文
posted @ 2021-04-19 17:14 Szz 阅读(124) 评论(0) 推荐(0)
摘要:转自: YARN源码分析之StateMachineFactory状态机 状态机由一组状态组成,这些状态大体分为三类,分别为初始状态、中间状态和最终状态。状态机首先由初始状态A开始运行,经过一系列的中间状态后到达最终状态,并在最终状态退出,从而形成一个有向无环图。其状态处理的逻辑是收到一个事件,触发状 阅读全文
posted @ 2021-02-20 17:20 Szz 阅读(434) 评论(0) 推荐(0)
摘要:转自: https://blog.csdn.net/houzhizhen/article/details/51372058 Records在Yarn中原代码中主要用于RPC通訊,如以下语句生成一个新应用程序的請求,GetNewApplicationRequest request = Records. 阅读全文
posted @ 2021-02-18 15:29 Szz 阅读(110) 评论(0) 推荐(0)
摘要:https://blog.csdn.net/jediael_lu/article/details/76735217 阅读全文
posted @ 2021-01-06 15:14 Szz 阅读(59) 评论(0) 推荐(0)
摘要:https://stackoverflow.com/questions/6951895/what-does-and-mean-in-scala https://www.marcinkossakowski.com/posts/2016-11-05-difference-between-function 阅读全文
posted @ 2020-12-16 21:25 Szz 阅读(63) 评论(0) 推荐(0)
摘要:英文:http://people.csail.mit.edu/matei/papers/2010/hotcloud_spark.pdf 中文:https://blog.csdn.net/allenlu2008/article/details/39324123 Spark :工作组上的集群计算的框架 阅读全文
posted @ 2020-12-08 19:19 Szz 阅读(806) 评论(0) 推荐(0)