2019年7月12日
spark.streaming.kafka.maxRatePerPartition的理解
摘要： spark.streaming.kafka.maxRatePerPartition设定对目标topic每个partition每秒钟拉取的数据条数。 假设此项设为1，批次间隔为10s，目标topic只有一个partition，则一次拉取的数据量为1*10*1=10。 若有不对的地方，请指正。 阅读全文
posted @ 2019-07-12 16:40 梦醒江南·Infinite 阅读(3503) 评论(0) 推荐(0)