Leo-Yide - 博客园

2025年3月31日

摘要：一、Kafka核心术语深度解析 1. 集群架构相关术语说明生产环境要点 Kafka Cluster 由多个broker组成的集群建议至少3节点保证高可用 Broker Kafka服务器实例每个broker需要唯一ID Producer 消息生产者支持同步/异步发送模式 Consumer 阅读全文

posted @ 2025-03-31 17:34 Leo-Yide 阅读(77) 评论(0) 推荐(0)

Kafka集群部署与配置全指南

摘要：一、Kafka单节点部署详解 1. 软件准备与安装下载Kafka发行版 wget https://downloads.apache.org/kafka/3.7.1/kafka_2.13-3.7.1.tgz 解压到指定目录 tar xf kafka_2.13-3.7.1.tgz -C /softwa 阅读全文

posted @ 2025-03-31 17:30 Leo-Yide 阅读(1989) 评论(0) 推荐(0)

ZooKeeper集群深度调优指南

摘要：一、JVM内存配置优化 1. 内存配置原理 ZooKeeper作为Java应用，JVM堆内存设置直接影响其性能表现：默认配置问题：原始1GB配置对于配置中心场景过大内存溢出风险：不当配置可能导致GC频繁或OOM 内存估算公式：推荐堆内存 = 平均znode大小 × znode数量 × 3 + 会阅读全文

posted @ 2025-03-31 10:56 Leo-Yide 阅读(288) 评论(0) 推荐(0)

ZooKeeper节点类型与高级特性深度解析

摘要：一、ZooKeeper节点类型详解 1. 节点类型概述 ZooKeeper中的节点(znode)主要分为两大类型，每种类型在分布式系统中都有特定的应用场景：临时节点(Ephemeral Nodes) 特性：当创建该节点的客户端会话结束时自动删除超时机制：默认会话超时时间为30秒（可通过tickT 阅读全文

posted @ 2025-03-31 10:55 Leo-Yide 阅读(103) 评论(0) 推荐(0)

ZooKeeper集群常用命令实战指南：增删改查全面解析

摘要：前言作为分布式系统中广泛使用的协调服务，Apache ZooKeeper在集群管理、配置维护、命名服务等方面发挥着重要作用。本文将详细介绍ZooKeeper集群中最常用的节点操作命令，包括查看、创建、修改和删除节点等操作，帮助开发者和运维人员掌握ZooKeeper的核心操作技能。环境准备在开始阅读全文

posted @ 2025-03-31 10:41 Leo-Yide 阅读(129) 评论(0) 推荐(0)

2025年3月30日

Elasticsearch 路由确定机制深度解析

摘要： 1. 核心公式与原理 Elasticsearch 使用以下算法确定文档所属分片： shard = hash(document\_id) \ \% \ number\_of\_primary\_shards hash(document_id) 对文档ID（如 "user-1001"）进行一致性哈希计算阅读全文

posted @ 2025-03-30 17:42 Leo-Yide 阅读(71) 评论(0) 推荐(0)

Zookeeper 集群部署与高可用验证指南

摘要：一、Zookeeper 集群规模选择根据官方文档和实践经验，Zookeeper 集群规模选择建议如下： 3节点集群（推荐基础配置）：适合读请求占比75%以下的场景官方测试支持910个客户端并发连接可容忍1个节点故障（满足半数以上存活原则） 5节点集群（生产推荐）：适合高负载或高可用性要求的阅读全文

posted @ 2025-03-30 13:09 Leo-Yide 阅读(487) 评论(0) 推荐(0)

Elasticsearch 集群 API 使用指南与 ELFK 架构瓶颈分析

摘要：一、Elasticsearch 集群 API 详解 1. 集群健康检查 API 基础命令： curl -s -u elastic:密码 10.0.0.91:9200/_cluster/health | jq 关键参数说明参数说明理想值 status 集群健康状态 (green/yellow/r 阅读全文

posted @ 2025-03-30 11:10 Leo-Yide 阅读(52) 评论(0) 推荐(0)

Filebeat 和 Logstash 访问加密 Elasticsearch 集群配置指南

摘要：一、Filebeat 配置加密 ES 集群访问 1. 安全增强的 Filebeat 配置文件示例 filebeat.inputs: - type: tcp host: "0.0.0.0:9000" output.elasticsearch: hosts: - "https://10.0.0.91:9 阅读全文

posted @ 2025-03-30 11:05 Leo-Yide 阅读(203) 评论(0) 推荐(0)

Kibana 认证配置与 Elastic 用户密码修改指南

摘要：一、Kibana 认证配置 1. 修改 Kibana 配置文件 vim /etc/kibana/kibana.yml 添加/修改以下配置项： elasticsearch.username: "kibana_system" elasticsearch.password: "eJxJC67YRh8d5V 阅读全文

posted @ 2025-03-30 10:58 Leo-Yide 阅读(1337) 评论(0) 推荐(0)