kafka相关的问题

kafka 如何实现主从同步

1. Kafka通过副本机制来实现主从同步。每个分区都有多个副本，其中一个副本被指定为领导者（Leader），其他副本被指定为追随者（Follower）。Leader负责处理所有的读写请求，而Follower只是简单地复制领导者的数据。
2. 当生产者向Kafka发送消息时，它会将消息发送到领导者副本。领导者副本将消息写入本地日志，并将消息复制到所有追随者副本。一旦所有追随者副本都确认已成功复制消息，领导者副本将向生产者发送确认消息。
3. 当消费者从Kafka读取消息时，它会从领导者副本读取数据。如果领导者副本不可用，消费者可以从追随者副本读取数据。Kafka使用ZooKeeper来管理领导者和追随者副本之间的切换，以确保高可用性和数据一致性。

Leader副本发生宕机怎么办

leader副本发生宕机时，follower副本就发生作用了，kafka将从follower副本中选取一个作为新的leader副本对外提供服务。

kafka的数据写入顺序问题

1. 在同一分区内，消息顺序是有序的。

写入顺序：生产者按 发送顺序 将消息写入分区，Kafka 保证消息在分区内的 存储顺序与发送顺序一致。

• 例如：生产者依次发送消息 A、B、C 到分区 P1，分区 P1 中存储的顺序必定是 A → B → C。

读取顺序：消费者从分区中拉取消息时，按 存储顺序 读取，即先读取 A，再读取 B，最后读取 C。

2. 在不同分区内，消息顺序是无顺序的。

• 例如，生产者向分区 P1 发送消息 X，向分区 P2 发送消息 Y，Kafka 不保证 X 和 Y 的全局顺序（可能 Y 先到达 P2，而 X 后到达 P1）。