随笔分类 -  Kafka

Kafka高性能原理
摘要：Kafka是最热门的消息中间件之一，Benchmark中领先一众对手。道理我都懂，但是Kafka为什么这么快？ 什么是Kafka？ 说正事之前，先看下什么是Kafka？官方对它的定义是A distributed streaming platform，即分布式流处理平台，一般用于系统间数据流管道和实时 阅读全文
posted @ 2021-06-18 16:23 kldx5092 阅读(163) 评论(0) 推荐(0)
深入理解Kafka副本机制
摘要：转载自：Kafka 系列（五）—— 深入理解Kafka副本机制_黑白影的博客-CSDN博客 一、Kafka集群 Kafka 使用 Zookeeper 来维护集群成员 (brokers) 的信息。每个 broker 都有一个唯一标识 broker.id，用于标识自己在集群中的身份，可以在配置文件 se 阅读全文
posted @ 2021-06-07 18:25 kldx5092 阅读(270) 评论(0) 推荐(0)
Kafka消费者详解
摘要：转载自：Kafka 系列（四）—— Kafka消费者详解_黑白影的博客-CSDN博客 一、消费者和消费者群组 在 Kafka 中，消费者通常是消费者群组的一部分，多个消费者群组共同读取同一个主题时，彼此之间互不影响。Kafka 之所以要引入消费者群组这个概念是因为 Kafka 消费者经常会做一些高延 阅读全文
posted @ 2021-06-07 16:41 kldx5092 阅读(435) 评论(0) 推荐(0)
Kafka生产者详解
摘要：转自：Kafka 系列（三）—— Kafka生产者详解_黑白影的博客-CSDN博客_kafka生产者 一、生产者发送消息的过程 首先介绍一下 Kafka 生产者发送消息的过程： Kafka 会将发送消息包装为 ProducerRecord 对象， ProducerRecord 对象包含了目标主题和要 阅读全文
posted @ 2021-06-07 15:23 kldx5092 阅读(320) 评论(0) 推荐(0)
Kafka集群部署指南
摘要：一、前言 1、Kafka简介 Kafka是一个开源的分布式消息引擎/消息中间件，同时Kafka也是一个流处理平台。Kakfa支持以发布/订阅的方式在应用间传递消息，同时并基于消息功能添加了Kafka Connect、Kafka Streams以支持连接其他系统的数据(Elasticsearch、Ha 阅读全文
posted @ 2021-06-07 14:25 kldx5092 阅读(265) 评论(0) 推荐(0)
消息队列：高可用、不重复消费、可靠传输、顺序消费、消息堆积
摘要：转载自：字节跳动面试官这样问消息队列：高可用、不重复消费、可靠传输、顺序消费、消息堆积，我整理了下_冰河的专栏-CSDN博客 1. 什么是消息队列？ 消息队列（Message Queue）是在消息的传输过程中保存消息的容器，是应用间的通信方式。消息发送后可以立即返回，由消息系统保证消息的可靠传输，消 阅读全文
posted @ 2021-06-07 12:29 kldx5092 阅读(377) 评论(0) 推荐(0)
Kafka基本原理详解
摘要：转载自：Kafka基本原理详解（超详细！）_蔡政洁的博客-CSDN博客_kafka 一、概念理解 Kafka是最初由Linkedin公司开发，是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数 阅读全文
posted @ 2021-06-07 11:00 kldx5092 阅读(424) 评论(0) 推荐(0)
Kafka（一）简介与架构
摘要：1.1 概述 Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。 阅读全文
posted @ 2021-05-19 20:34 kldx5092 阅读(129) 评论(0) 推荐(0)