Docker容器日志占用空间过大问题及解决
(福利推荐:你还在原价购买阿里云服务器?现在阿里云0.8折限时抢购活动来啦!4核8G企业云服务器仅2998元/3年,立即抢购>>>:9i0i.cn/aliyun)
Docker容器日志占用空间过大问题
问题
docker容器日志导致主机磁盘空间满了。
docker logs -f container_name噼里啪啦一大堆,很占用空间,不用的日志可以清理掉了。
解决方法
找出Docker容器日志
在linux上,容器日志一般存放在/var/lib/docker/containers/container_id/下面,查看各个日志文件大小的脚本docker_log_size.sh,内容如下:
#!/bin/sh? echo "======== docker containers logs file size ========" ? logs=$(find /var/lib/docker/containers/ -name *-json.log) ? for log in $logs ? ? ? ? ? do ? ? ? ? ? ? ? ?ls -lh $log ?? ? ? ? ? done
# chmod +x docker_log_size.sh # ./docker_log_size.sh
清理Docker容器日志(治标)
如果docker容器正在运行,那么使用rm -rf方式删除日志后,通过df -h会发现磁盘空间并没有释放。
原因是在Linux或者Unix系统中,通过rm -rf或者文件管理器删除文件,将会从文件系统的目录结构上解除链接(unlink)。
如果文件是被打开的(有一个进程正在使用),那么进程将仍然可以读取该文件,磁盘空间也一直被占用。正确姿势是cat /dev/null > *-json.log,当然你也可以通过rm -rf删除后重启docker。
接下来,提供一个日志清理脚本clean_docker_log.sh,内容如下:
#!/bin/sh? echo "======== start clean docker containers logs ========" ? logs=$(find /var/lib/docker/containers/ -name *-json.log) ? for log in $logs ? ? ? ? ? do ? ? ? ? ? ? ? ? ? echo "clean logs : $log" ? ? ? ? ? ? ? ? ? cat /dev/null > $log ? ? ? ? ? done ? echo "======== end clean docker containers logs ========" # chmod +x clean_docker_log.sh # ./clean_docker_log.sh
但是,这样清理之后,随着时间的推移,容器日志会像杂草一样,卷土重来。
设置Docker容器日志大小(治本)
设置一个容器服务的日志大小上限
上述方法,日志文件迟早又会涨回来。
要从根本上解决问题,需要限制容器服务的日志大小上限。
这个通过配置容器docker-compose的max-size选项来实现
nginx:? ? image: nginx:1.12.1? ? restart: always? ? logging:? ? ? driver: “json-file”? ? ? options:? ? ? ? max-size: “5g”?
重启nginx容器之后,其日志文件的大小就被限制在5GB,再也不用担心了。
全局设置
新建/etc/docker/daemon.json,若有就不用新建了。添加log-dirver和log-opts参数,样例如下:
# vim /etc/docker/daemon.json { ? "log-driver":"json-file", ? "log-opts": {"max-size":"500m", "max-file":"3"} }
max-size=500m
,意味着一个容器日志大小上限是500M,max-file=3
,意味着一个容器有三个日志,分别是id+.json、id+1.json、id+2.json。
// 重启docker守护进程 # systemctl daemon-reload # systemctl restart docker
注意:设置的日志大小,只对新建的容器有效。
Docker容器日志清理
问题:
docker容器长时间运行,若程序有大量的打印,日志会不断增大,导致主机磁盘空间满。
根治docker容器的方法:限制容器日志文件的大小,文件的数量。
通过配置max-log限制日志文件的大小,max-file参数限制日志文件的数量
使用docker-compose.yml文件部署,针对单一容器进行限制
docker-rate: ? ? image: python:3.9.5 ? ? container_name:docker-rate ? ? restart: always ? ? logging: ? ? ? options: ? ? ? ? max-size: "5g" ? ? ? ? max-file: "1" ? ? volumes: ? ? ?- /var/share:/share ? ? command: bash -c "python /share/run.py" ? ? environment: ? ? ? VERSION: 1
修改docker配置文件,全局生效
vim /etc/docker/daemon.json { ? "log-opts": {"max-size": "500m", "max-file": "3"} }
总结
以上为个人经验,希望能给大家一个参考,也希望大家多多支持程序员之家。
相关文章
Docker compose部署SpringBoot项目连接MySQL及遇到的坑
这篇文章主要介绍了Docker compose部署SpringBoot项目连接MySQL,文中给大家强调了如果在使用的过程中修改了Dockerfile,一定要把之前的镜像删掉,具体内容详情跟随小编一起看看吧2021-09-09
最新评论