摘要: Spark运行特点: 每个Application获取专属的executor进程,该进程在Application期间一直驻留,并以多线程方式运行Task。这种Application隔离机制是有优势的,无论是从调度角度看(每个Driver调度他自己的任务),还是从运行角度看(来自不同Applicatio 阅读全文
posted @ 2023-10-26 22:37 Weebles 阅读(34) 评论(0) 推荐(0)
摘要: 形成一致的抽象,抽象能使你忽略无关的细节。 合作设计,三个臭皮匠顶的上一个诸葛亮,含义是设计的过程中 可以将自己的设计方案与同事讨论一番,询问同事的一些想法,讨论一些设计方案。 类的接口应该展现一致的抽象层次 编写子程序的理由: 降低复杂度,易懂的抽象,避免代码重复,隐藏指针操作,提高可移植性,简化 阅读全文
posted @ 2023-10-26 09:12 Weebles 阅读(21) 评论(0) 推荐(0)