背景
在笔者的工作测试环境中,使用过程中突然出现根磁盘快吃满了(docker也是使用的根池盘的/var/lib/docker), wtf ? 服务用不了? 当然网上找到了一些常规的清楚docker 日志文件 但是通过df -hT 查看到overlay 卷还是占有超过70%的盘,通过如图可以知道df -h 和 du -sh * 发现/var/lib/docker/overlay2实际物理没有占用多少,但是通过 df -h 查看到 /var/lib/docker/overlay2/{id}/merged 这个目录挂载占用了很多,为何差距如此巨大,这里面肯定存在一些容器系统实际占有的,但是比新部署的多了200G+的盘,可能也有有统计/缓存占有的(这里我也不清楚原因到底多出来的是怎么发生的,可能是操作系统统计问题?,希望有大神指点),翻遍文献,经过无数次测试后总结了下面的步骤,亲测有效。
清理方案
1. 由于是根磁盘所以第一件事情是清理磁盘的其它文件,比如日志,不要的文件
find / -size +1G -type file
通过这个命令找打文件大 且多的不要文件,然后一一删除掉。
2. 在第一步清理之后开始清理docker 日志文件
echo "======== start clean docker containers logs ========"
logs=$(find /var/lib/docker/containers/ -name *-json.log)
for log in $logs
do
echo "clean logs : $log"
cat /dev/null > $log
done
echo "======== end clean docker containers logs ========"
这个是抄的同行的,太懒了 懒得写了。
3. 清理docker tmp 文件 目录在/var/lib/docker/tmp ,接下来怎么做你懂的。
4. 清理dockers 系统的文件 比如 镜像 和 卷,执行下面两个命令
docker system prune -a
docker volume prune
5. 解决上面提到的问题(overlay2 占用磁盘过大不释放),在容器/etc/docker/daemon.json 添加如下代码
{
"log-opts": {
"max-size": "10m",
"max-file": "3"
},
"storage-driver": "overlay2",
"storage-opts": [
"overlay2.override_kernel_check=1"
]
}
如果没有daemon.json文件就新增一个同名文件。最后重启docker。
systemctl stop docker
systemctl start docker
6. 有可能是nexus 或者gitlab 或者harbor 这类的连接占磁盘 所有在做上面步骤之前可以先停一下。
组后效果比上图好很多free 从几十G 变成300G+
写下这个的目的,发现网上的文章不全,或者就没有效果,希望后来者更容易解决问题!看到这里就给个赞呗!!!!