如何确定 Kafka 的 Leader 节点？

一、命令行工具查询‌

1. ‌使用 kafka-topics.sh 查看分区 Leader‌

   # 列出所有主题及其分区的 Leader 信息
bin/kafka-topics.sh --describe --bootstrap-server <Broker地址> --topic <主题名>
   • ‌输出示例‌：
     Topic: test PartitionCount: 3 ReplicationFactor: 2

     Topic: test Partition: 0 Leader: 1 Replicas: 1,2 Isr: 1,2

     Topic: test Partition: 1 Leader: 2 Replicas: 2,3 Isr: 2,3
     • Leader 字段表示当前分区 Leader 的 Broker ID‌。

2. ‌查看特定分区的 Leader‌

   bin/kafka-topics.sh --describe --bootstrap-server <Broker地址> --topic <主题名> --partition <分区号>

‌

二、通过 ZooKeeper 或 Controller 节点查询‌

1. ‌查看 Controller 节点‌

   • Controller 是 Kafka 集群中负责管理分区 Leader 选举的核心组件，其 Broker ID 存储在 ZooKeeper 的 /controller 路径下‌。
   • 通过 ZooKeeper 客户端查看：
     # 进入 ZooKeeper CLI
zookeeper-shell.sh <ZooKeeper地址>

# 查看 Controller 节点
get /controller
     • 输出示例：{"version":1,"brokerid":1,"timestamp":"..."}，其中 brokerid 为当前 Controller 的 Broker ID‌。

2. ‌验证 Leader 分配逻辑‌

   • Controller 根据 ISR（In-Sync Replicas）列表选举 Leader，优先选择 ISR 中偏移量最大的副本‌。

‌

三、监控工具辅助定位‌

1. ‌使用 Kafka Manager 或 Confluent Control Center‌

   • 工具界面会直接展示各分区 Leader 的 Broker ID 和副本分布‌。

2. ‌通过消费者组信息推导‌

   bin/kafka-consumer-groups.sh --bootstrap-server <Broker地址> --describe --group <消费者组名>
   • 输出中 CURRENT-OFFSET 和 LEADER 字段可间接反映 Leader 节点的活跃状态‌。

‌

四、注意事项‌

1. ‌Leader 自动故障转移‌

   • 若 Leader 宕机，Controller 会从 ISR 中自动选举新 Leader（默认优先选择最新副本）‌。
   • 若 ISR 为空且 unclean.leader.election.enable=true，可能从非 ISR 副本中选举 Leader（存在数据丢失风险）‌。

2. ‌网络与配置影响‌

   • 确保 advertised.listeners 配置正确，否则客户端可能无法连接 Leader‌。