2025年3月19日
如何确定 Kafka 的 Leader 节点？
摘要： 一、命令行工具查询‌ ‌使用 kafka-topics.sh 查看分区 Leader‌ # 列出所有主题及其分区的 Leader 信息 bin/kafka-topics.sh --describe --bootstrap-server <Broker地址> --topic <主题名> ‌输出示例‌： 阅读全文
posted @ 2025-03-19 16:05 业余砖家 阅读(248) 评论(0) 推荐(0)
Kafka 常见故障及解决方案
摘要： 1. Broker 无法启动‌ ‌原因‌： 端口被占用（默认 9092）或配置错误（如 server.properties 路径不可写）‌。 ZooKeeper 连接失败（地址配置错误或 ZooKeeper 服务未启动）‌。 ‌解决‌： 检查端口占用：使用 netstat -tuln | grep 阅读全文
posted @ 2025-03-19 15:52 业余砖家 阅读(927) 评论(0) 推荐(0)
HBase RegionServer 宕机原因及解决方案
摘要： ‌一、核心原因与对应解决方案‌ ‌JVM Full GC 异常‌ ‌原因‌：长时间 Full GC 导致 RegionServer 停顿（常见于堆内存管理不当或 JVM 参数配置不合理）‌。 ‌解决‌： 优化 JVM 参数，如调整 CMS/ParNew 垃圾回收器参数，避免频繁 Full GC‌。 阅读全文
posted @ 2025-03-19 15:10 业余砖家 阅读(175) 评论(0) 推荐(0)
Hadoop 使用 DistCp 跨集群迁移数据的完整指南
摘要： 一、DistCp 核心原理与适用场景‌ ‌原理‌：DistCp 是 Hadoop 提供的分布式文件复制工具，基于 MapReduce 实现跨集群或集群内数据的高效复制，支持大规模数据迁移和增量同步。 ‌适用场景‌： 集群升级或迁移（如从本地集群迁移至云集群）。 数据备份与容灾（跨机房或跨地域复制）。 阅读全文
posted @ 2025-03-19 14:16 业余砖家 阅读(770) 评论(0) 推荐(0)