07 2021 档案

【FLink任务调度源码】一、四个图的详细解析
摘要：一、task任务调度流程图 二、Graph图的概念 flink执行图的四层概念：streamGraph>JobGraph>ExecutionGraph>物理执行图； streamGraph，根据api编写的代码生成的图，展示程序的拓扑结构，在client生成 jobGraph，streamGraph 阅读全文
posted @ 2021-07-23 22:35 持枢 阅读(320) 评论(0) 推荐(0)
【Flink内存管理】初步认识
摘要：一、很多大数据工具是基于jvm，Flink使用自主内存管理，这两者有什么区别 1.jvm存储数据密度低，它包含三个部分，对象头，实例对象，对齐填充；java高级语言，很多事不用人为去做，自动去处理，偏底层自己做，就叫低级语言； 2.FullGC会极大的影响性能，尤其为了处理大数据而开了很大的内存空间 阅读全文
posted @ 2021-07-19 19:16 持枢 阅读(290) 评论(0) 推荐(0)