随笔分类 -  kafka

2-kafka日志和分区
摘要:1.topic中日志存储形式 分区内部有序,但是同一分区不同partion之间的消息的顺序是无法得知的; 2.分区有序概念 kafka是消息队列,数据在写入topic是按照轮循或者hash(key)%分区数方式将数据写入,分区中是无法保证分区与分区 数据的顺序,只能保证分区内部数据的顺序,但是无法得 阅读全文

posted @ 2023-06-12 09:30 companion 阅读(46) 评论(0) 推荐(0)

1-kafka介绍及基础架构
摘要:1.kafka: 高吞吐量的分布式发布订阅消息系统; 1>同步变异步 2>解耦 3>削峰填谷 2.消息队列的两种工作模式: 保证到kafka中的消息被多个消费者消费,并且被相同消费者重复消费; 3.kafka集群形式 4. hash:消息的均匀分散,相同的key落入同一分区 只有leader负责分区 阅读全文

posted @ 2023-06-09 16:15 companion 阅读(26) 评论(0) 推荐(0)