Leo_Yide - 博客园

2025年4月1日

摘要：前言作为现代容器化技术的核心引擎，Docker 已成为 DevOps 流程中不可或缺的基础设施组件。本文将详细介绍 Docker 的二进制部署方案，这是生产环境中常用的部署方式之一，特别适用于需要定制化部署或受限网络环境的场景。一、Docker 部署方案选型在生产环境中，Docker 主要有两阅读全文

posted @ 2025-04-01 17:58 Leo_Yide 阅读(1171) 评论(0) 推荐(1)

2025年3月31日

FileBeat与Logstash集成Kafka实战指南

摘要：一、FileBeat写入Kafka配置详解 1. 核心配置解析 filebeat.inputs: - type: tcp host: "0.0.0.0:9000" # 监听TCP端口 output.kafka: hosts: ["elk91:9092", "elk92:9092", "elk93:9 阅读全文

posted @ 2025-03-31 17:38 Leo_Yide 阅读(288) 评论(0) 推荐(0)

Kafka核心概念与实战操作全解析

摘要：一、Kafka核心术语深度解析 1. 集群架构相关术语说明生产环境要点 Kafka Cluster 由多个broker组成的集群建议至少3节点保证高可用 Broker Kafka服务器实例每个broker需要唯一ID Producer 消息生产者支持同步/异步发送模式 Consumer 阅读全文

posted @ 2025-03-31 17:34 Leo_Yide 阅读(92) 评论(0) 推荐(0)

Kafka集群部署与配置全指南

摘要：一、Kafka单节点部署详解 1. 软件准备与安装下载Kafka发行版 wget https://downloads.apache.org/kafka/3.7.1/kafka_2.13-3.7.1.tgz 解压到指定目录 tar xf kafka_2.13-3.7.1.tgz -C /softwa 阅读全文

posted @ 2025-03-31 17:30 Leo_Yide 阅读(2671) 评论(0) 推荐(0)

ZooKeeper集群深度调优指南

摘要：一、JVM内存配置优化 1. 内存配置原理 ZooKeeper作为Java应用，JVM堆内存设置直接影响其性能表现：默认配置问题：原始1GB配置对于配置中心场景过大内存溢出风险：不当配置可能导致GC频繁或OOM 内存估算公式：推荐堆内存 = 平均znode大小 × znode数量 × 3 + 会阅读全文

posted @ 2025-03-31 10:56 Leo_Yide 阅读(379) 评论(0) 推荐(0)

ZooKeeper节点类型与高级特性深度解析

摘要：一、ZooKeeper节点类型详解 1. 节点类型概述 ZooKeeper中的节点(znode)主要分为两大类型，每种类型在分布式系统中都有特定的应用场景：临时节点(Ephemeral Nodes) 特性：当创建该节点的客户端会话结束时自动删除超时机制：默认会话超时时间为30秒（可通过tickT 阅读全文

posted @ 2025-03-31 10:55 Leo_Yide 阅读(165) 评论(0) 推荐(0)

ZooKeeper集群常用命令实战指南：增删改查全面解析

摘要：前言作为分布式系统中广泛使用的协调服务，Apache ZooKeeper在集群管理、配置维护、命名服务等方面发挥着重要作用。本文将详细介绍ZooKeeper集群中最常用的节点操作命令，包括查看、创建、修改和删除节点等操作，帮助开发者和运维人员掌握ZooKeeper的核心操作技能。环境准备在开始阅读全文

posted @ 2025-03-31 10:41 Leo_Yide 阅读(207) 评论(0) 推荐(0)

2025年3月30日

Elasticsearch 路由确定机制深度解析

摘要： 1. 核心公式与原理 Elasticsearch 使用以下算法确定文档所属分片： shard = hash(document\_id) \ \% \ number\_of\_primary\_shards hash(document_id) 对文档ID（如 "user-1001"）进行一致性哈希计算阅读全文

posted @ 2025-03-30 17:42 Leo_Yide 阅读(97) 评论(0) 推荐(0)

Zookeeper 集群部署与高可用验证指南

摘要：一、Zookeeper 集群规模选择根据官方文档和实践经验，Zookeeper 集群规模选择建议如下： 3节点集群（推荐基础配置）：适合读请求占比75%以下的场景官方测试支持910个客户端并发连接可容忍1个节点故障（满足半数以上存活原则） 5节点集群（生产推荐）：适合高负载或高可用性要求的阅读全文

posted @ 2025-03-30 13:09 Leo_Yide 阅读(707) 评论(0) 推荐(0)

Elasticsearch 集群 API 使用指南与 ELFK 架构瓶颈分析

摘要：一、Elasticsearch 集群 API 详解 1. 集群健康检查 API 基础命令： curl -s -u elastic:密码 10.0.0.91:9200/_cluster/health | jq 关键参数说明参数说明理想值 status 集群健康状态 (green/yellow/r 阅读全文

posted @ 2025-03-30 11:10 Leo_Yide 阅读(65) 评论(0) 推荐(0)