摘要： 排查ceph集群发现，有一个osd处于full，2个osdnearfull，ceph集群出现fullosd会禁止写入和删除操作（nearfull是即将到达full状态的一个提醒，在此状态时，应该及时安排集群扩容等处理。） 进入cep-tool使用ceph osd df 查看 有一个osd使用率超过9 阅读全文

摘要： 背景：架构为fluentd日志采集后放到本地之后上传到es中，发现fluentd采集的日志本地存量一直在上涨，没有将日志写入es中，fluentd日志报错read timeout reached，如下图 排查： 1、怀疑磁盘性能问题，使用dd命令测试了es-data所用磁盘，发现写入速度还是可以的， 阅读全文

摘要： 背景：有一些客户harbor仓库启用后就没有设置镜像tag限制导致磁盘快满的时候有些镜像tag非常多，有需求批量删除镜像tag，以下是python脚本用于删除镜像tag,可自定义保留tag数量，清理完成之后，再清理元数据就可以腾出空间，亲测好用 #! /usr/bin/env python # -* 阅读全文

摘要： 背景：某测试环境中es-data数据用的是根磁盘的空间，将根磁盘打满，导致主机异常，确认后可以将es的数据清空。登录主机直接到es-data目录下发现占用60G,rm -rf ./* 之后发现只清理出了6G的空间 排查过程： 1、重启多次主机尝试，发现空间还是占用率很高 2、使用partprobe命 阅读全文