摘要：spring boot + kafka + zookeeper 环境搭建见上一篇 pom文件添加依赖 application.yml 配置如下（简单测试足够） 阅读全文

摘要：kafka集群安装部署到使用 由于条件有限整了三台虚拟机进行部署 主机规划： 10.250.23.213 ZooKeeper-Kafka-01 10.250.23.214 ZooKeeper-Kafka-0210.250.23.215 ZooKeeper-Kafka-03 一段小插曲：虚拟机网络不通 阅读全文

摘要：kafka 学习（三） 一、高可用的由来 1.1　为何需要Replication 在Kafka在0.8以前的版本中，是没有Replication的，一旦某一个Broker宕机，则其上所有的Partition数据都不可被消费，这与Kafka数据持久性及Delivery Guarantee的设计目标相悖 阅读全文

摘要：kafka 学习（二） 一、Kafka的架构 如上图所示，一个典型的Kafka集群中包含若干Producer（可以是web前端产生的Page View，或者是服务器日志，系统CPU、Memory等），若干broker（Kafka支持水平扩展，一般broker数量越多，集群吞吐率越高），若干Consu 阅读全文

摘要：kafka 学习（一） 一、简介 Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会 阅读全文