Kubernetes集群使用CentOS 7.6系统时kubelet日志含有“Reason:KubeletNotReady Message:PLEG is not healthy:”信息

问题描述
Kubernetes集群使用CentOS 7.6版本的系统时,kubelet日志中可能存在以下告警信息。

Reason:KubeletNotReady Message:PLEG is not healthy:

问题原因
CentOS 7.6系统使用的systemd-219-62.el7_6.6.x86_64软件包存在缺陷,引发异常错误。如果您想了解更多信息,请参见[Node flapping between Ready/NotReady with PLEG issues。] https://github.com/kubernetes/kubernetes/issues/45419?spm=a2c4g.11186623.2.6.5f5b2aa8locvUh

解决方案
请通过快照等方式备份您的数据,然后在Kubernetes集群的各节点上执行以下命令,更新systemd程序包至最新版本并重新运行systemd程序。

yum update -y systemd && systemctl daemon-reexec

这是systemd的一个bug导致,可以重启实例恢复,彻底解决需要升级下systemd的版本
if [[ rpm -qa systemd| grep systemd-219< "systemd-219-67" ]]; then yum update -y systemd; fi&& systemctl daemon-reexec && killall runc

posted @ 2021-05-12 09:42  武兴旺  阅读(420)  评论(0编辑  收藏  举报