随笔分类 -  Flink

Flink问题及解决方案
摘要：1. 当Source是Kafka的时候，如何设置Source Operator的并发度？ 如果没有指定，Source Operator的个数与集群中的TaskManager的个数相等。如果手动设置，建议使用的slot个数=Kafka Partition的个数／TaskManager的个数。此时，Sl 阅读全文
posted @ 2020-05-06 15:18 kwz 阅读(2705) 评论(0) 推荐(1)
Flink on yarn
摘要：一:　配置: 1.配置yarn-site.xml <property><name>yarn.resourcemanager.am.max-attempts</name><value>4</value></property> 2.配置flink的flink-conf.yaml high-availab 阅读全文
posted @ 2019-01-11 10:42 kwz 阅读(587) 评论(0) 推荐(0)