2019年9月3日

kafka常见问题

摘要： 1.kafka想消费已经消费过的数据 （1）采用不同的 comsumer groupID （2）线上数据同步到其他镜像中去 2.kafka如何设置生存周期与清理数据 topic 设置数据保存周期 有一个线程定期扫描log file，把保存时间超过阀值的直接删除。 3.spark-streaming获取kafka的两种方式 （1）Receive 方式 （2）Direct方式 使用kafka api 阅读全文

posted @ 2019-09-03 13:28 床上小老虎 阅读(366) 评论(0) 推荐(0)

导航