12 2020 档案
编译 flink 1.12.0
摘要:参考文档: 编译Flink 1.9.0 https://www.cnblogs.com/Springmoon-venn/p/11512136.html 编译环境: ubuntu 18.05Java : 1.8.0_271 官网下载源码包:https://mirrors.tuna.tsinghua.e 阅读全文
posted @ 2020-12-22 19:50 Flink菜鸟 阅读(1244) 评论(0) 推荐(1)
Flink 1.12.0 sql 任务指定 job name
摘要:参考前文:解决 Flink 1.11.0 sql 不能指定 jobName 的问题 从 FLink 1.11 改版 sql 的执行流程后,就不能和 Stream Api 一样使用 env.execute("JobName") 来指定任务名 看了源码后发现,在 sql 任务中,直接使用了 "inser 阅读全文
posted @ 2020-12-19 11:53 Flink菜鸟 阅读(6295) 评论(1) 推荐(1)
【翻译】Apache Flink 1.12.0 Release Announcement
摘要:本文来自官网: https://flink.apache.org/news/2020/12/10/release-1.12.0.html 2020年12月10日Marta Paes(@morsapaes)和Aljoscha Krettek(@aljoscha) Apache Flink社区很高兴地宣 阅读全文
posted @ 2020-12-17 10:25 Flink菜鸟 阅读(1117) 评论(0) 推荐(1)
【源码】Flink 三层图结构 —— JobGraph 生成过程
摘要:注: 所有内容都基于Flink 本地模式 JobGraph 的生成是从 LocalExecutor.java. execute 方法开始的 // 本地执行调用 Pipeline 是 StreamGraph 的父类 @Override public CompletableFuture<JobClien 阅读全文
posted @ 2020-12-09 20:44 Flink菜鸟 阅读(1106) 评论(0) 推荐(1)
【源码】Flink 算子 chain 在一起的条件
摘要:Flink 任务的图结构中,部分算子是 chain 在一起的,因为 chain 在一起有很多好处(减少序列化和网络开销,提高效率),而算子 chain 在一起是需要条件的 Flink 任务在生成 JobGraph 的时候,会加入 chain 的概念,会判断算子能否 chain 在一起 首先在 env 阅读全文
posted @ 2020-12-09 18:59 Flink菜鸟 阅读(1123) 评论(0) 推荐(1)