摘要: 算子分类: 注意,使用lambda表达式的时候,需要注意类型推断的问题,首推内部类或者单独实现接口的类。 基础转换: map 1对1,flatmap 1对多,filter 过滤。 keyby:逻辑上将流划分为不相交的分区,具有相同 key 的记录会被分配到同一个分区。 KeyedStream<MyE 阅读全文
posted @ 2025-10-08 14:25 ---江北 阅读(3) 评论(0) 推荐(0)
摘要: 运行组件: 最核心的是管理者jobManager和实际干活的taskManager。 jm接收作业图dag,包括做中央协调(协调checkpoint等), tm使用插槽slots运行数据,不同tm之间也可以交换数据等。 整体运行流程: 并行度的概念: slots概念 前后发生的算子任务,允许共享sl 阅读全文
posted @ 2025-09-28 14:25 ---江北 阅读(4) 评论(0) 推荐(0)
摘要: https://blog.csdn.net/m0_37989980/article/details/126091233 阅读全文
posted @ 2025-09-25 16:11 ---江北 阅读(5) 评论(0) 推荐(0)
摘要: 代码: package com.yourcompany.flink; import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;import java.util.Properties; /** * 最简版 阅读全文
posted @ 2025-09-24 17:22 ---江北 阅读(6) 评论(0) 推荐(0)
摘要: 本站整理下载: 链接:https://pan.baidu.com/s/1P1bK-zdSuknnBuoAS6ZeXA 提取码:hfy9 阅读全文
posted @ 2025-09-24 15:51 ---江北 阅读(5) 评论(0) 推荐(0)
该文被密码保护。 阅读全文
posted @ 2025-09-12 16:40 ---江北 阅读(0) 评论(0) 推荐(0)
该文被密码保护。 阅读全文
posted @ 2025-09-04 16:42 ---江北 阅读(0) 评论(0) 推荐(0)
摘要: 以下是几个关键的变化领域,我将使用 Java 8 语法进行对比展示。 1. 批执行的明确性:BATCH 执行模式成为首选 在 Flink 1.15 之前,虽然已经引入了流批一体,但执行模式(ExecutionMode)的设置相对繁琐。新版本更加强调和简化了这一点。 旧方式 (Flink 1.14 及 阅读全文
posted @ 2025-09-03 11:18 ---江北 阅读(23) 评论(0) 推荐(0)
该文被密码保护。 阅读全文
posted @ 2025-08-01 15:45 ---江北 阅读(0) 评论(0) 推荐(0)
该文被密码保护。 阅读全文
posted @ 2025-07-25 14:06 ---江北 阅读(0) 评论(0) 推荐(0)
TOP