Kafka - 文章分类 - dongdongag

kafka java api

摘要：一、生产者二、消费者三、main方法四、生产者自定义分区，实现Partitioner接口，放入kafka构造函数配置即可 props.put(ProducerConfig.PARTITIONER_CLASS_CONFIG, "com.ord.kafka.CustomerPartitioner" 阅读全文

posted @ 2019-06-02 22:11 dongdongag

Kafka集群架构

摘要：一、kafka架构 1、zookeeper和kafka集群broker与consumer打交道，zookeeper保存broker信息，方便集群高可用性。监控各个节点，组从选举等。保存consumer 消费消息的offset，方便下次顺序消费(新版本不存consumer的offset消息，而是直接存阅读全文

posted @ 2019-06-01 00:04 dongdongag

Kafka集群搭建

摘要：一、环境准备 192.168.87.130 192.168.87.131 192.168.87.132 二、tgz拷贝，建立软连接 kafka_2.12-2.2.0.tgz拷贝至/usr/local目录下解压，建立软连接 ln -s kafka_2.12-2.2.0 kafka 三、创建logs目录阅读全文

posted @ 2019-05-30 22:47 dongdongag

文章分类 - Kafka