摘要: 1. 安装JDK:下载JDK并解压后,配置/etc/profile环境变量 export JAVA_HOME=/usr/java/jdk1.8.0_202 export PATH=$JAVA_HOME/bin:$PATH export CLASSPATH=.:$JAVA_HOME/lib/dt.ja 阅读全文
posted @ 2025-10-13 15:09 蓬莱寒剑 阅读(11) 评论(0) 推荐(0)
摘要: 前言​ 在分布式系统搭建中,HDFS 的安装部署是常见环节,但过程中总会遇到各种问题。本文就来分享一次 HDFS 部署时,namenode2未初始化而 namenode1 已启动的排查与解决经历,希望能帮到有需要的朋友。 ​ 一、问题背景​ 近期搭建小型 Hadoop 集群,计划部署两个 namen 阅读全文
posted @ 2025-08-06 14:02 蓬莱寒剑 阅读(13) 评论(0) 推荐(0)
摘要: 2025年国内可使用的镜像源: "https://docker.m.daocloud.io","https://docker.imgdb.de","https://docker-0.unsee.tech","https://docker.hlmirror.com" 配置方法: 1.修改配置文件如下所 阅读全文
posted @ 2025-07-08 16:37 蓬莱寒剑 阅读(320) 评论(0) 推荐(0)
摘要: 最近团队将Hadoop升级到3.4.0后,发现提交flink任务失败,报错为 root is not a leaf queue,如下图所示 经过资料查询,得知yarn中非叶子队列不能提交任务,因此需要指定叶子队列提交任务。 但是通过yarn queue -list root 发现root队列没有子队 阅读全文
posted @ 2025-06-07 15:27 蓬莱寒剑 阅读(44) 评论(0) 推荐(0)
摘要: 最近在项目中碰到某个主机CPU突然干到4000%+的情况,且长时间降不下来,在此记录一下问题定位过程和方法 1. 通过 top -p 8510 【java进程ID为8510】 过滤 进程监控列表,按H可以看到 当前java进程中每个线程的繁忙程度。【实际项目未截图,这里是测试环境的截图】 使用pri 阅读全文
posted @ 2023-07-03 18:19 蓬莱寒剑 阅读(135) 评论(0) 推荐(0)