摘要：
一、添加新节点（横向扩容） 新节点基础配置 网络与主机名：修改新节点的IP地址和主机名，确保与集群其他节点在同一网络并更新所有节点的/etc/hosts文件。 防火墙设置：关闭防火墙、禁止防火墙开机自启。 SSH免密登录：生成新节点的SSH密钥并分发到NameNode，确保集群节点 阅读全文
posted @ 2025-03-20 11:06
业余砖家
阅读(252)
评论(0)
推荐(0)
摘要：
一、命令行工具查询 使用 kafka-topics.sh 查看分区 Leader # 列出所有主题及其分区的 Leader 信息 bin/kafka-topics.sh --describe --bootstrap-server <Broker地址> --topic <主题名> 输出示例： 阅读全文
posted @ 2025-03-19 16:05
业余砖家
阅读(319)
评论(0)
推荐(0)
摘要：
1. Broker 无法启动 原因： 端口被占用（默认 9092）或配置错误（如 server.properties 路径不可写）。 ZooKeeper 连接失败（地址配置错误或 ZooKeeper 服务未启动）。 解决： 检查端口占用：使用 netstat -tuln | grep 阅读全文
posted @ 2025-03-19 15:52
业余砖家
阅读(1046)
评论(0)
推荐(0)
摘要：
一、核心原因与对应解决方案 JVM Full GC 异常 原因：长时间 Full GC 导致 RegionServer 停顿（常见于堆内存管理不当或 JVM 参数配置不合理）。 解决： 优化 JVM 参数，如调整 CMS/ParNew 垃圾回收器参数，避免频繁 Full GC。 阅读全文
posted @ 2025-03-19 15:10
业余砖家
阅读(216)
评论(0)
推荐(0)
摘要：
一、DistCp 核心原理与适用场景 原理：DistCp 是 Hadoop 提供的分布式文件复制工具，基于 MapReduce 实现跨集群或集群内数据的高效复制，支持大规模数据迁移和增量同步。 适用场景： 集群升级或迁移（如从本地集群迁移至云集群）。 数据备份与容灾（跨机房或跨地域复制）。 阅读全文
posted @ 2025-03-19 14:16
业余砖家
阅读(946)
评论(0)
推荐(0)
摘要：
什么是lambda表达式 lambda 表达式是一个匿名函数，lambda表达式基于数学中的λ演算得名，直接对应于其中的lambda抽象，是一个匿名函数，即没有函数名的函数。 lambda表达式常用来声明匿名函数，即没有函数名字的临时使用的小函数，常用在临时需要一个类似于函数的功能但又不想定义函数的 阅读全文
posted @ 2025-03-11 11:16
业余砖家
阅读(250)
评论(0)
推荐(0)
摘要：
一、Linux 基础 1. 常用命令 （1）、如何查看系统当前运行的进程？ 答案：ps aux 或 top/htop （2）、grep 和 find 的区别是什么？ grep 用于文本内容搜索，find 用于文件名/属性搜索 （3）、如何查看一个文件的最后10行？如何实时监控文件内容变化？ tail 阅读全文
posted @ 2025-03-10 18:49
业余砖家
阅读(3666)
评论(0)
推荐(0)
摘要：
一、什么是Pandas库 （1）、Pandas 应用 Pandas 可以从各种文件格式比如 CSV、JSON、SQL、Excel 导入数据。 Pandas 可以对各种数据进行运算操作，比如归并、再成形、选择，还有数据清洗和数据加工特征。 Pandas 广泛应用在学术、金融、统计学等各个数据分析领域。 阅读全文
posted @ 2025-03-10 11:16
业余砖家
阅读(3747)
评论(0)
推荐(1)
摘要：
1、Excel填充序号1~1000（删除其中一行后，序号会自动更新） （1）首先在左上角的位置框中输入A1:A1000，然后按Enter回车健，即可选中A1到A1000的单元格。 （2）然后在函数框中输入=ROW()，按Ctrl + Enter即可，即可填充1-1000。 阅读全文
posted @ 2025-03-09 17:45
业余砖家
阅读(58)
评论(0)
推荐(0)
摘要：
以下是 Python 中 break、pass 和 continue 三者的核心区别及使用场景总结： 一、功能区别 关键字作用适用场景 break 立即终止当前循环（包括 for 和 while），跳出循环体执行后续代码。 当满足特定条件需提前结束循环时使用，如遍历中查找到目标值后终止 阅读全文
posted @ 2025-03-08 14:22
业余砖家
阅读(770)
评论(0)
推荐(0)
浙公网安备 33010602011771号