Fork me on Gitee

随笔分类 -  Kafka

记录Kafka学习笔记
摘要:kafka集群中的Controller、rebalance和HW 1. Controller 集群中谁会来充当controoler? 每个broker启动时会向zk创建一个临时序号节点,获得的序号最小的那个broker将会作为集群中的controller。主要负责 主副本选举 管理分区状态机 管理副 阅读全文
posted @ 2021-11-17 09:19 shine-rainbow 阅读(183) 评论(0) 推荐(0)
摘要:1.生产者的基本实现 1.1 引入依赖 <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka-clients</artifactId> <!--版本号根据kafka安装包版本指定,比如kafka_2.12-2.0.0-- 阅读全文
posted @ 2021-11-15 16:15 shine-rainbow 阅读(1753) 评论(0) 推荐(0)
摘要:1. Kafka概述 kafka是最初由LinkedIn公司开发,是一个分布式、支持分区(partition)、多副本(replica),基于zookeeper协调的分布式消息系统,它的最大的特点就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、Str 阅读全文
posted @ 2021-11-12 15:19 shine-rainbow 阅读(448) 评论(0) 推荐(0)