随笔分类 -  Flink

Flink跟Spark Streaming的区别
摘要：1）架构模型Spark Streaming 在运行时的主要角色包括：Master、Worker、Driver、Executor，Flink 在运行时主要包含：Jobmanager、Taskmanager和Slot。 2）任务调度Spark Streaming 连续不断的生成微小的数据批次，构建有向无 阅读全文
posted @ 2020-12-31 22:35 曲水修竹 阅读(1376) 评论(0) 推荐(0)
Flink设置并行度的方式和执行级别顺序
摘要：Flink设置并行度的几种方式 1.代码中设置setParallelism() 全局设置： env.setParallelism(3); 算子设置（部分设置）： sum(1).setParallelism(3) 2.客户端CLI设置（或webui直接输入数量）： ./bin/flink run -p 阅读全文
posted @ 2020-03-18 11:01 曲水修竹 阅读(3657) 评论(0) 推荐(0)