Docker容器日志占用空间过大问题及解决

 更新时间:2023年05月11日 09:16:36   作者:Rubick_Y  
这篇文章主要介绍了Docker容器日志占用空间过大问题及解决方案,具有很好的参考价值,希望对大家有所帮助。如有错误或未考虑完全的地方,望不吝赐教
(福利推荐:【腾讯云】服务器最新限时优惠活动,云服务器1核2G仅99元/年、2核4G仅768元/3年,立即抢购>>>:9i0i.cn/qcloud

(福利推荐:你还在原价购买阿里云服务器?现在阿里云0.8折限时抢购活动来啦!4核8G企业云服务器仅2998元/3年,立即抢购>>>:9i0i.cn/aliyun

Docker容器日志占用空间过大问题

问题

docker容器日志导致主机磁盘空间满了。

docker logs -f container_name噼里啪啦一大堆,很占用空间,不用的日志可以清理掉了。

解决方法

找出Docker容器日志

在linux上,容器日志一般存放在/var/lib/docker/containers/container_id/下面,查看各个日志文件大小的脚本docker_log_size.sh,内容如下:

#!/bin/sh?
echo "======== docker containers logs file size ========" ?
logs=$(find /var/lib/docker/containers/ -name *-json.log) ?
for log in $logs ?
? ? ? ? do ?
? ? ? ? ? ? ?ls -lh $log ??
? ? ? ? done
# chmod +x docker_log_size.sh
# ./docker_log_size.sh

清理Docker容器日志(治标)

如果docker容器正在运行,那么使用rm -rf方式删除日志后,通过df -h会发现磁盘空间并没有释放。

原因是在Linux或者Unix系统中,通过rm -rf或者文件管理器删除文件,将会从文件系统的目录结构上解除链接(unlink)。

如果文件是被打开的(有一个进程正在使用),那么进程将仍然可以读取该文件,磁盘空间也一直被占用。正确姿势是cat /dev/null > *-json.log,当然你也可以通过rm -rf删除后重启docker。

接下来,提供一个日志清理脚本clean_docker_log.sh,内容如下:

#!/bin/sh?
echo "======== start clean docker containers logs ========" ?
logs=$(find /var/lib/docker/containers/ -name *-json.log) ?
for log in $logs ?
? ? ? ? do ?
? ? ? ? ? ? ? ? echo "clean logs : $log" ?
? ? ? ? ? ? ? ? cat /dev/null > $log ?
? ? ? ? done ?
echo "======== end clean docker containers logs ========"
# chmod +x clean_docker_log.sh
# ./clean_docker_log.sh

但是,这样清理之后,随着时间的推移,容器日志会像杂草一样,卷土重来。

设置Docker容器日志大小(治本)

设置一个容器服务的日志大小上限

上述方法,日志文件迟早又会涨回来。

要从根本上解决问题,需要限制容器服务的日志大小上限。

这个通过配置容器docker-compose的max-size选项来实现

nginx:?
? image: nginx:1.12.1?
? restart: always?
? logging:?
? ? driver: “json-file”?
? ? options:?
? ? ? max-size: “5g”?

重启nginx容器之后,其日志文件的大小就被限制在5GB,再也不用担心了。

全局设置

新建/etc/docker/daemon.json,若有就不用新建了。添加log-dirver和log-opts参数,样例如下:

# vim /etc/docker/daemon.json
{
? "log-driver":"json-file",
? "log-opts": {"max-size":"500m", "max-file":"3"}
}
  • max-size=500m,意味着一个容器日志大小上限是500M,
  • max-file=3,意味着一个容器有三个日志,分别是id+.json、id+1.json、id+2.json。
// 重启docker守护进程
# systemctl daemon-reload
# systemctl restart docker

注意:设置的日志大小,只对新建的容器有效。

Docker容器日志清理

问题:

docker容器长时间运行,若程序有大量的打印,日志会不断增大,导致主机磁盘空间满。

根治docker容器的方法:限制容器日志文件的大小,文件的数量。

通过配置max-log限制日志文件的大小,max-file参数限制日志文件的数量

使用docker-compose.yml文件部署,针对单一容器进行限制

docker-rate:
? ? image: python:3.9.5
? ? container_name:docker-rate
? ? restart: always
? ? logging:
? ? ? options:
? ? ? ? max-size: "5g"
? ? ? ? max-file: "1"
? ? volumes:
? ? ?- /var/share:/share
? ? command: bash -c "python /share/run.py"
? ? environment:
? ? ? VERSION: 1

修改docker配置文件,全局生效

vim /etc/docker/daemon.json
{
? "log-opts": {"max-size": "500m", "max-file": "3"}
}

总结

以上为个人经验,希望能给大家一个参考,也希望大家多多支持程序员之家。

相关文章

  • Docker镜像分层的实现示例

    Docker镜像分层的实现示例

    本文主要介绍了Docker镜像分层的实现示例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2023-08-08
  • 如何查看docker-compose.yml所在位置

    如何查看docker-compose.yml所在位置

    这篇文章主要介绍了如何查看docker-compose.yml所在位置问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教
    2023-11-11
  • Docker部署Nginx并配置反向代理

    Docker部署Nginx并配置反向代理

    这篇文章介绍了Docker部署Nginx并配置反向代理的方法,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2022-01-01
  • Docker compose部署SpringBoot项目连接MySQL及遇到的坑

    Docker compose部署SpringBoot项目连接MySQL及遇到的坑

    这篇文章主要介绍了Docker compose部署SpringBoot项目连接MySQL,文中给大家强调了如果在使用的过程中修改了Dockerfile,一定要把之前的镜像删掉,具体内容详情跟随小编一起看看吧
    2021-09-09
  • Docker安装MySql8并远程访问的实现

    Docker安装MySql8并远程访问的实现

    本文主要介绍了Docker安装MySql8并远程访问的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2022-07-07
  • 详解Docker Swarm概念与用法

    详解Docker Swarm概念与用法

    这篇文章主要介绍了Docker Swarm概念与用法,帮助大家更好的理解和使用docker容器,感兴趣的朋友可以了解下
    2020-09-09
  • MacBookPro下docker的安装与使用教程

    MacBookPro下docker的安装与使用教程

    Windows与Linux下关于docker的安装使用方法有很多,今天小编这里给大家分享的是MacOS下docker的安装与简单使用案例,非常简单,给有需要的小伙伴参考下
    2017-03-03
  • docker安装使用xdebug的过程

    docker安装使用xdebug的过程

    这篇文章主要介绍了docker安装使用xdebug的过程,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
    2023-09-09
  • 两小时入门Docker教程实践

    两小时入门Docker教程实践

    这篇文章主要介绍了两小时入门Docker教程实践,小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧
    2019-03-03
  • 解析docker妙用SpringBoot构建微服务实战记录

    解析docker妙用SpringBoot构建微服务实战记录

    Spring Boot 是 Spring 开源组织的子项目,是 Spring 组件一站式解决方案,本文通过详细案例给大家解析docker妙用SpringBoot构建微服务实战记录,感兴趣的朋友跟随小编一起看看吧
    2021-11-11

最新评论

?


http://www.vxiaotou.com