天下之事,必先处之难,而后易之。

Apache Kafka教程A系列:集群架构

原文地址:https://www.tutorialspoint.com/apache_kafka/apache_kafka_cluster_architecture.htm

看看下面的插图, 它展示了Kafka的集群图。


下表描述了上图中显示的每个组件。

序列号组件和描述
1

Broker

Kafka集群通常由多个代理组成,以保持负载平衡。 卡夫卡代理者是无状态的,所以他们使用ZooKeeper维护他们的集群状态。 一个Kafka代理实例可以处理每秒数十万次的读写操作,每个Broker都可以处理TB消息,而不会影响性能。 卡夫卡代理者领导者选举可以由ZooKeeper完成。

2

ZooKeeper

ZooKeeper用于管理和协调Kafka代理者。 ZooKeeper服务主要用于通知生产者和消费者有关Kafka系统中任何新代理者的存在或Kafka系统中代理者的失败。 根据Zookeeper收到的有关代理者存在或失败的通知,生产者和消费者就会做出决定,并开始与其他代理者协调他们的任务。

3

Producers

生产者将数据推送给代理者。 新代理启动后,所有生产者都会搜索它并自动向该新代理发送消息。 卡夫卡生产者不会等待代理者的确认,并且可以像代理者处理的那样快地发送消息。

4

Consumers

由于Kafka代理是无状态的,这意味着消费者必须通过使用分区偏移量来维护消耗了多少消息。 如果消费者确认特定的消息偏移量,则意味着消费者已经消费了所有先前的消息。 消费者向代理发出一个异步拉取请求,以准备消耗字节缓冲区。 消费者可以简单地通过提供偏移值来倒回或跳到分区中的任何点。 消费者补偿值由ZooKeeper通知。


posted @ 2024-09-09 00:13  boonya  阅读(27)  评论(0)    收藏  举报  来源
我有佳人隔窗而居,今有伊人明月之畔。
轻歌柔情冰壶之浣,涓涓清流梦入云端。
美人如娇温雅悠婉,目遇赏阅适而自欣。
百草层叠疏而有致,此情此思怀彼佳人。
念所思之唯心叩之,踽踽彳亍寤寐思之。
行云如风逝而复归,佳人一去莫知可回?
深闺冷瘦独自徘徊,处处明灯影还如只。
推窗见月疑是归人,阑珊灯火托手思忖。
庐居闲客而好品茗,斟茶徐徐漫漫生烟。

我有佳人在水之畔,瓮载渔舟浣纱归还。
明月相照月色还低,浅近芦苇深深如钿。
庐山秋月如美人衣,画堂春阁香气靡靡。
秋意幽笃残粉摇曳,轻轻如诉画中蝴蝶。
泾水潺潺取尔浇园,暮色黄昏如沐佳人。
青丝撩弄长裙翩翩,彩蝶飞舞执子手腕。
香带丝缕缓缓在肩,柔美体肤寸寸爱怜。
如水之殇美玉成欢,我有佳人清新如兰。
伊人在水我在一边,远远相望不可亵玩。