长时间运行的集群,常会面临各种资源耗尽的问题,另外磁盘不足时 Kubelet 还会主动清理镜像增加不确定因素,本文提供了一些命令片段用于清理工作。
一、Kubernetes基础对象清理
1.1 清理Evicted 状态的 Pod
$ kubectl get pods --all-namespaces -o wide | grep Evicted | awk '{print $1,$2}' | xargs -L1 kubectl delete pod -n
1.2 清理Error状态的Pod
$ kubectl get pods --all-namespaces -o wide | grep Error | awk '{print $1,$2}' | xargs -L1 kubectl delete pod -n
1.3 清理 Completed 状态的 Pod
$ kubectl get pods --all-namespaces -o wide | grep Completed | awk '{print $1,$2}' | xargs -L1 kubectl delete pod -n
1.4 清理没有被使用的 PV
$ kubectl describe -A pvc | grep -E "^Name:.*$|^Namespace:.*$|^Used By:.*$" | grep -B 2 "<none>" | grep -E "^Name:.*$|^Namespace:.*$" | cut -f2 -d: | paste -d " " - - | xargs -n2 bash -c 'kubectl -n ${1} delete pvc ${0}'
1.5 清理没有被绑定的 PVC
$ kubectl get pvc --all-namespaces | tail -n +2 | grep -v Bound | awk '{print $1,$2}' | xargs -L1 kubectl delete pvc -n
1.6 清理没有被绑定的 PV
$ kubectl get pv | tail -n +2 | grep -v Bound | awk '{print $1}' | xargs -L1 kubectl delete pv
二、Linux清理
2.1 查看磁盘全部空间
$ df -hl
2.2 查看指定目录占用
$ du -sh .
2.3 删除指定前缀的文件夹
$ ls | grep archived- |xargs -L1 rm -r
2.4 清理僵尸进程
$ ps -A -ostat,ppid | grep -e '^[Zz]' | awk '{print }' | xargs kill -HUP > /dev/null 2>&1
三、Docker清理
3.1 查看磁盘使用情况
$ docker system df
3.2 清理none镜像
$ docker images | grep none | awk '{print $3}' | xargs docker rmi
3.3 清理不再使用的数据卷
$ docker volume rm $(docker volume ls -q)
或者
$ docker volume prune
3.4 清理缓存
$ docker builder prune
3.5 全面清理
删除关闭的容器、无用的存储卷、无用的网络、dangling 镜像(无 tag 镜像)
$ docker system prune -f
3.6 清理正则匹配上的镜像
这里清理的是 master-8bcf8d7-20211206-111155163
格式的镜像。
$ docker images |grep -E "([0-9a-z]*[-]){3,}[0-9]{9}" |awk '{print $3}' | xargs docker rmi
四、设置定时
4.1 查看定时任务
$ crontab -l
4.2 设置定时任务
$ crontab -e
文本新增定时任务:
*/35 */6 * * * docker images | grep none | awk '{print $3}' | xargs docker rmi
45 1 * * * docker system prune -f
这里第一个任务是每隔六个小时的第 35 分钟执行,第二个任务每天的 1 时 45 分执行。
- 定时任务的格式
设置定时格式: * * * * * shell
第一个星号,minute,分钟,值为 0-59 第二个星号,hour,小时,值从 0-23 第三个星号,day,天,值为从 1-31 第四个星号,month,月,值为从 1-12 月,或者简写的英文,比如 Nov、Feb 等 第五个星号,week 周,值为从 0-6 或者简写的英文,Wen、Tur 等,代表周几,其中 0 代表周末