随笔分类 -  Hadoop

摘要:yarn applicationmaster报错:找不到/tmp/hadoop-hadoop/nm-local-dir/usercache/root/appcache 1. 问题概述 最近发现yarn中的application集体停止运行,查看历史应用Exception详情,出现如下错误:java. 阅读全文
posted @ 2025-12-15 11:14 蓬莱寒剑 阅读(14) 评论(0) 推荐(0)
摘要:前言​ 在分布式系统搭建中,HDFS 的安装部署是常见环节,但过程中总会遇到各种问题。本文就来分享一次 HDFS 部署时,namenode2未初始化而 namenode1 已启动的排查与解决经历,希望能帮到有需要的朋友。 ​ 一、问题背景​ 近期搭建小型 Hadoop 集群,计划部署两个 namen 阅读全文
posted @ 2025-08-06 14:02 蓬莱寒剑 阅读(34) 评论(0) 推荐(0)
摘要:最近团队将Hadoop升级到3.4.0后,发现提交flink任务失败,报错为 root is not a leaf queue,如下图所示 经过资料查询,得知yarn中非叶子队列不能提交任务,因此需要指定叶子队列提交任务。 但是通过yarn queue -list root 发现root队列没有子队 阅读全文
posted @ 2025-06-07 15:27 蓬莱寒剑 阅读(85) 评论(0) 推荐(0)