随笔分类 -  Kafka

摘要:1、 push:消耗MQ资源 pull:消耗消费者 (一个独立线程--kafka) 2、发布/订阅模式->传输机制push 订阅者分为两种类型:持久、临时 阅读全文
posted @ 2018-04-28 18:02 海东青Lo 阅读(131) 评论(0) 推荐(0)
摘要:1、一旦消费者的数量超过分区的数量,新消费者将不会接收任何进一步的消息,直到现有消费者取消订阅任何一个消费者。 出现这种情况是因为Kafka中的每个消费者将被分配至少一个分区,并且一旦所有分区被分配给现有消费者,新消费者将必须等待。一个consumer可以消费多个partitions的消息。 2、  阅读全文
posted @ 2018-01-11 14:49 海东青Lo 阅读(131) 评论(0) 推荐(0)
摘要:1、概念 broker:分布式中的每台服务器即broker。 topic:每个消息类别放在一个topic。 partition:每个topic包含一个或多个partition。 producer:生产者 consumer:消费者 consumer group 2、存储格式 每个topic逻辑上就是一 阅读全文
posted @ 2017-10-31 18:01 海东青Lo 阅读(145) 评论(0) 推荐(0)