随笔分类 -  Flink

Flink/Kafka - Flink集成Kafka
摘要:一、背景介绍 本文以risk-summary项目为背景来介绍。我们主要关注step 1 和 step 2 以flink作为中心来看,其在step 1把kafka作为数据源(addSource)获取数据,经过flink处理后,将处理后的数据再输出(addSink)到kafka 二、Flink与Kafk 阅读全文

posted @ 2022-05-10 00:10 frank_cui 阅读(661) 评论(0) 推荐(0)

Flink - 运行时架构
摘要:一、Flink运行时四大组件 二、任务提交流程 更详细的图: 阅读全文

posted @ 2022-01-04 22:11 frank_cui 阅读(48) 评论(0) 推荐(0)

Flink - DataSet 批处理 vs DataStream 流处理
摘要:相关视频教程 尚硅谷Java版Flink P7 - DataSet: https://www.bilibili.com/video/BV1qy4y1q728?p=7 尚硅谷Java版Flink P8 - DataStream: https://www.bilibili.com/video/BV1qy 阅读全文

posted @ 2022-01-03 21:40 frank_cui 阅读(49) 评论(0) 推荐(0)

Flink - Flink介绍
摘要:一、Flink是什么? Apache Flink是一个框架和分布式处理引擎(用来计算,不是用来储存的),用于对无界和有界数据流进行状态计算。 二、为什么选择Flink? Flink vs Spark Streaming? spark streaming Flink 定义 弹性的分布式数据集,并非真正 阅读全文

posted @ 2021-12-12 23:45 frank_cui 阅读(76) 评论(0) 推荐(0)

导航

levels of contents