随笔分类 -  Kafka

run kafka local
摘要：Q: How to run kafka localdownload kafka http://kafka.apache.org/downloadsstart zookeeper$ bin/zookeeper-server-start.sh config/zookeeper.propertiessta 阅读全文
posted @ 2021-09-09 14:01 tonggc1668 阅读(34) 评论(0) 推荐(0)
KafkaFactoryPool
摘要：import lombok.Data; import lombok.extern.slf4j.Slf4j; import org.apache.kafka.clients.producer.ProducerConfig; import org.springframework.beans.factor 阅读全文
posted @ 2021-09-05 23:55 tonggc1668 阅读(71) 评论(0) 推荐(0)
kafka 原理
摘要：Kafka水位(high watermark)与leader epoch的讨论 https://www.cnblogs.com/huxi2b/p/7453543.html kafka的relication机制 https://zhuanlan.zhihu.com/p/67387617 阅读全文
posted @ 2021-02-04 11:29 tonggc1668 阅读(46) 评论(0) 推荐(0)
SimpleKafkaProducer with ssl
摘要：import static org.apache.kafka.clients.CommonClientConfigs.SECURITY_PROTOCOL_CONFIG; import static org.apache.kafka.clients.producer.ProducerConfig.BA 阅读全文
posted @ 2020-03-17 16:25 tonggc1668 阅读(199) 评论(0) 推荐(0)
kafka cmd with ssl
摘要：set PATH=C:\Program Files\Java\jdk1.8.0_201\bin;@call kafka-consumer-groups.bat --bootstrap-server localhost:9092 --describe --group test-uat --comman 阅读全文
posted @ 2020-02-28 12:45 tonggc1668 阅读(193) 评论(0) 推荐(0)
kafka 零拷贝
摘要：kafka通过零拷贝实现高效的数据传输 https://blog.csdn.net/lxlmycsdnfree/article/details/78973864 Kafka零拷贝 https://blog.csdn.net/ljheee/article/details/99652448 Kafka高 阅读全文
posted @ 2019-12-17 14:05 tonggc1668 阅读(507) 评论(0) 推荐(0)
kafka分区选主机制
摘要：Kafka Partition Leader选主机制 https://blog.csdn.net/qq_27384769/article/details/80115392 kafka leader选举机制原理 https://blog.csdn.net/yanshu2012/article/deta 阅读全文
posted @ 2019-12-16 20:07 tonggc1668 阅读(649) 评论(0) 推荐(0)
使用kafka bin目录中的zookeeper-shell.sh来查看kafka在zookeeper中的配置
摘要：cd kafka_2.11-0.10.2.1\bin\windowsecho ls /brokers/ids | zookeeper-shell.bat localhost:2181 使用kafka bin目录中的zookeeper-shell.sh来查看kafka在zookeeper中的配置。 连 阅读全文
posted @ 2019-02-27 15:29 tonggc1668 阅读(1721) 评论(0) 推荐(0)
kafka producer参数详解
摘要：https://my.oschina.net/u/218540/blog/1794669/ 阅读全文
posted @ 2019-02-26 10:52 tonggc1668 阅读(483) 评论(0) 推荐(0)
kafka的offset和ProcessingGuarantee
摘要：https://blog.csdn.net/qq_40625030/article/details/85280013 可能大部分朋友都觉得在任何情况下把这两个值设置为earliest或者latest ,消费者就可以从最早或者最新的offset开始消费,但在实际上测试的时候发现并不是那么回事,因为他们 阅读全文
posted @ 2019-01-23 16:51 tonggc1668 阅读(503) 评论(0) 推荐(0)
Kafka读取__consumer_offsets和Kafka 0.11客户端管理工具AdminClient
摘要：https://blog.csdn.net/m0_37739193/article/details/78185155 https://blog.csdn.net/qq_36096641/article/details/81583268 阅读全文
posted @ 2019-01-19 18:59 tonggc1668 阅读(212) 评论(0) 推荐(0)
kafkaconsumer SimpleExample
摘要：package kafka.simple; import java.nio.ByteBuffer; import java.util.ArrayList; import java.util.Collections; import java.util.HashMap; import java.util.List; import java.util.Map; import kafka.api.F... 阅读全文
posted @ 2019-01-19 17:56 tonggc1668 阅读(552) 评论(0) 推荐(0)