2025 年 3月 31 日随笔档案 - Leo-Yide

2025年3月31日

摘要：一、FileBeat写入Kafka配置详解 1. 核心配置解析 filebeat.inputs: - type: tcp host: "0.0.0.0:9000" # 监听TCP端口 output.kafka: hosts: ["elk91:9092", "elk92:9092", "elk93:9 阅读全文

posted @ 2025-03-31 17:38 Leo-Yide 阅读(226) 评论(0) 推荐(0)

Kafka核心概念与实战操作全解析

摘要：一、Kafka核心术语深度解析 1. 集群架构相关术语说明生产环境要点 Kafka Cluster 由多个broker组成的集群建议至少3节点保证高可用 Broker Kafka服务器实例每个broker需要唯一ID Producer 消息生产者支持同步/异步发送模式 Consumer 阅读全文

posted @ 2025-03-31 17:34 Leo-Yide 阅读(77) 评论(0) 推荐(0)

Kafka集群部署与配置全指南

摘要：一、Kafka单节点部署详解 1. 软件准备与安装下载Kafka发行版 wget https://downloads.apache.org/kafka/3.7.1/kafka_2.13-3.7.1.tgz 解压到指定目录 tar xf kafka_2.13-3.7.1.tgz -C /softwa 阅读全文

posted @ 2025-03-31 17:30 Leo-Yide 阅读(1989) 评论(0) 推荐(0)

ZooKeeper集群深度调优指南

摘要：一、JVM内存配置优化 1. 内存配置原理 ZooKeeper作为Java应用，JVM堆内存设置直接影响其性能表现：默认配置问题：原始1GB配置对于配置中心场景过大内存溢出风险：不当配置可能导致GC频繁或OOM 内存估算公式：推荐堆内存 = 平均znode大小 × znode数量 × 3 + 会阅读全文

posted @ 2025-03-31 10:56 Leo-Yide 阅读(288) 评论(0) 推荐(0)

ZooKeeper节点类型与高级特性深度解析

摘要：一、ZooKeeper节点类型详解 1. 节点类型概述 ZooKeeper中的节点(znode)主要分为两大类型，每种类型在分布式系统中都有特定的应用场景：临时节点(Ephemeral Nodes) 特性：当创建该节点的客户端会话结束时自动删除超时机制：默认会话超时时间为30秒（可通过tickT 阅读全文

posted @ 2025-03-31 10:55 Leo-Yide 阅读(103) 评论(0) 推荐(0)

ZooKeeper集群常用命令实战指南：增删改查全面解析

摘要：前言作为分布式系统中广泛使用的协调服务，Apache ZooKeeper在集群管理、配置维护、命名服务等方面发挥着重要作用。本文将详细介绍ZooKeeper集群中最常用的节点操作命令，包括查看、创建、修改和删除节点等操作，帮助开发者和运维人员掌握ZooKeeper的核心操作技能。环境准备在开始阅读全文

posted @ 2025-03-31 10:41 Leo-Yide 阅读(129) 评论(0) 推荐(0)