2023年5月30日
kafka消费端可以用预提交的方式进行精确消费
摘要： 为了避免重复消费：在服务器的数据库端记录一个状态，这个状态标志着这条消息被正确消费了 。如果在向kafka提交commit之前服务器崩掉了，再次启动时服务器读取这个状态，如果是这个消息被正确消费过的，就把指针指向下一条数据。 consumer delivery guarantee 阅读全文
posted @ 2023-05-30 22:20 人在代码在 阅读(31) 评论(0) 推荐(0)
kafka的leader，follow,offset
摘要： 注意一个partition只能在一个broker里面，不能跨服务器。但是作为备份的follower里面的备份partition可以放在另一个服务器中。 另外一个partition只有一个消费者。但是这个消费者可以同时消费多个partition. 1.partition分为主从。 2.当需要严格顺序时 阅读全文
posted @ 2023-05-30 22:08 人在代码在 阅读(36) 评论(0) 推荐(0)