随笔分类 -  Flink学习

DataStream API使用
摘要：DataStream编程模型 DataStream API主要可以分为三个部分，DataSource模块、Transformation模块以及DataSink模块，其中Sources模块主要定义了数据接入功能，主要是将各种外部数据接入至Flink系统中，并将数据转换成对应的DataStream数据集 阅读全文
posted @ 2020-09-24 09:21 Tanglement 阅读(417) 评论(0) 推荐(0)
Flink初识和编程模型
摘要：Flink初识 Flink同时支持 高吞吐、低延迟和exactly-once语义的实时计算能力，同时提供了基于流式计算引擎处理批量数据的计算能力，真正意义上实现了批流统一。 使用Hadoop MapReduce进行批量数据的处理，使用Apache Storm进行实时数据的处理。这种架构在一定程度上解 阅读全文
posted @ 2020-09-19 20:10 Tanglement 阅读(224) 评论(0) 推荐(0)