2020年11月27日
SparkStreaming批处理优化
摘要： https://zhuanlan.zhihu.com/p/256327560 一、如何保证Spark Streaming第一次启动不丢数据？ kafka的参数auto.offset.reset设定为earlist,保证Spark Streaming第一次启动从kafka最早偏移量开始拉取数据。 二、 阅读全文
posted @ 2020-11-27 19:58 guoyu1 阅读(609) 评论(0) 推荐(0)