会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
笨小康
「星辰大海,如期而至」
博客园
首页
管理
03 2021 档案
Yarn 日志聚合优化—摆脱 HDFS 依赖
摘要:背景 (1)问题背景 线上集群 Container 日志上报的事务集群 namenode rpc 持续飙高,影响到了 Yarn 分配 Container 的性能,任务提交数下降,导致整个集群的吞吐量下降。 (2)原因简介 作业提交到 Yarn 集群时,每个 NM 节点都会对每个 app 作业进行日志
阅读全文
posted @
2021-03-10 17:56
笨小康u
阅读(1706)
评论(0)
推荐(1)