随笔分类 -  Kafka

Kafka是一个分布式消息队列
摘要:第3章 Kafka工作流程分析 Kafka核心组成 3.1 Kafka生产过程分析 3.1.1 写入方式 producer采用推(push)模式将消息发布到broker,每条消息都被追加(append)到分区(patition)中,属于顺序写磁盘(顺序写磁盘效率比随机写内存要高,保障kafka吞吐率 阅读全文
posted @ 2019-07-29 01:13 DiYong 阅读(443) 评论(0) 推荐(0)
摘要:第2章 Kafka集群部署 2.1 环境准备 2.1.1 集群规划 hadoop01 hadoop02 hadoop03 多台分布式集群(这里举例三台) zk zk zk 每台机器上配置好ZooKeeper集群 kafka kafka kafka 每台机器上配置好Kafka集群 2.1.2 jar包 阅读全文
posted @ 2019-07-28 02:05 DiYong 阅读(276) 评论(0) 推荐(0)
摘要:第1章 Kafka概述 1.1 消息队列 消息队列的内部实现原理 (1)点对点模式(一对一,消费者主动拉取数据,消息收到后消息清除) √(kafka) 点对点模型通常是一个基于拉取或者轮询的消息传送模型,这种模型从队列中请求信息,而不是将消息推送到客户端。这个模型的特点是发送到队列的消息被一个且只有 阅读全文
posted @ 2019-07-28 01:42 DiYong 阅读(143) 评论(0) 推荐(0)