摘要：kafka manager + 介绍 Kafka集群管理工具主要支持以下几个功能： 1、管理几个不同的集群； 2、很容易地检查集群的状态(topics, brokers, 副本的分布, 分区的分布)； 3、选择副本； 4、产生分区分配(Generate partition assignments)基 阅读全文

摘要：动机 为了做一个公共、统一、可以支持庞大数据量、实时的平台。 需要具备高吞吐量来支持庞大的事件流 可以处理积压数据，可以缓存数据，用来支持周期性从线下load进来的数据 系统为了处理更多的消息，不得不低延时提交数据 ??? 我们想让系统支持，分区、分布式、实时处理新增以及衍生的消息，因此设计了分区和 阅读全文