随笔分类 -  Kafka

摘要:kafka消息中间件系列教程 第三节 Kafka性能优化实践 1、JVM参数设置 kafka是scala语言开发,运行在JVM上,需要对JVM参数合理设置,参看JVM调优专题 修改bin/kafka-start-server.sh中的jvm设置 export KAFKA_HEAP_OPTS="‐Xm 阅读全文
posted @ 2020-04-29 21:33 趙小傑 阅读(164) 评论(0) 推荐(0)
摘要:kafka集群管理工具kafka manager部署安装 kafka manager 是雅虎开源的apache kafka管理工具,是用Scala写,所以在web页面进行操作即可。 github地址:https://github.com/yahoo/CMAK 安装步骤 下载并编译源码 注意:编译需要 阅读全文
posted @ 2020-04-27 16:52 趙小傑 阅读(237) 评论(0) 推荐(0)
摘要:kafka消息中间件系列教程 第二节 kafka设计原理详解 1、Kafka核心总控制器Controller 在Kafka集群中会有一个或者多个broker,其中有一个broker会被选举为控制器(Kafka Controller),它负责管理整个集群中所有分区和副本的状态。 当某个分区的leade 阅读全文
posted @ 2020-04-26 22:14 趙小傑 阅读(192) 评论(0) 推荐(0)
摘要:kafka消息中间件系列教程 第一节 kafka集群搭建与使用 1、kafka基本概念 http://kafka.apache.org Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协 调的分布式消息系统 阅读全文
posted @ 2020-04-26 16:04 趙小傑 阅读(247) 评论(0) 推荐(0)