文章分类 -  kafka

摘要:背景 服务器IP: 172.16.16.10 kafka mkdir -p /data/docker-compose/kafka cd /data/docker-compose/kafka cat >> docker-compose.yaml << EOF version: "3" services 阅读全文
posted @ 2023-09-27 16:20 klvchen 阅读(2219) 评论(0) 推荐(0)
摘要:背景 官网: https://kafka.apache.org Kafka 传统定义: Kafka 是一个分布式的基于发布/订阅模式的消息队列(MessageQueue),主要应用于大数据实时处理领域。 发布/订阅: 消息的发布者不会将消息直接发送给特定的订阅者,而是将发布的消息分为不同的类别,订阅 阅读全文
posted @ 2023-03-24 17:34 klvchen 阅读(118) 评论(0) 推荐(0)
摘要:https://mp.weixin.qq.com/s?__biz=Mzk0NjIzOTI0NA==&mid=2247485505&idx=1&sn=b2bad1f02db3553c63fbba5a49e163c2&chksm=c3086a22f47fe3348d666c0e4f8ae6164dbe0 阅读全文
posted @ 2022-06-21 14:20 klvchen 阅读(9) 评论(0) 推荐(0)
摘要:这里使用 nfs (172.16.16.150) 注意点: zookeeper 和 kafka 都是需要保存文件的,如果使用 deployment 类型来部署,需要使用 pv 和 pvc 部署 zookeeper mkdir -p /data/yaml/kube-system/zookeeper c 阅读全文
posted @ 2022-05-05 15:49 klvchen 阅读(116) 评论(0) 推荐(0)
摘要:mkdir -p /data/yaml/kube-system/kafka-map cd /data/yaml/kube-system/kafka-map cat deployment.yaml apiVersion: apps/v1 kind: Deployment metadata: name: 阅读全文
posted @ 2022-01-27 11:49 klvchen 阅读(63) 评论(0) 推荐(0)
摘要:Kafka 是一个消息系统,原本开发自 LinkedIn,用作 LinkedIn 的活动流(Activity Stream)和运营数据处理管道(Pipeline)的基础。 Kafka 是一种分布式的,基于发布/订阅的消息系统,主要设计目标如下: 以时间复杂度为 O(1) 的方式提供消息持久化能力,即 阅读全文
posted @ 2019-08-22 14:17 klvchen 阅读(141) 评论(0) 推荐(0)