Docker清理释放磁盘空间、优化性能终极指南

2023-07-1908:15:09服务器及运维Comments1,664 views字数 4608阅读模式

Docker的日常使用中,我们或许偶尔遇到下面这些情况:文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

$ docker-compose ps
[27142] INTERNAL ERROR: cannot create temporary directory!

$ df -h
Filesystem      Size  Used Avail Use% Mounted on
devtmpfs        489M  132K  488M   1% /dev
tmpfs           497M     0  497M   0% /dev/shm
/dev/xvda1      7.8G  7.7G     0 100% /

这时候,我们大概明白了,大概是Docker把磁盘占满了。这时就需要我们去做一些清理了,这篇博客主要总结如下一些有效的Docker清理操作。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

  • 找到dockers数据与进程;
  • 删除未使用的镜像,容器,卷和网络;
  • 重置docker
  • 限制日志大小
  • 其他相关操作

在了解这些之前,我相信你已经对下面的一些词汇已经有一定的了解。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

  • image: 一个只读模版,可以用来创建container。如,一个包含ubuntu系统的镜像。
  • container: 从镜像创建的运行实例。可以用docker命令去控制这些container。
  • volume: docker数据持久化。
  • dangling: 未使用的image。
  • network: 连接docker容器服务。

查看Docker的磁盘使用情况

使用docker system df即可查看:文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

$ docker system df
TYPE              TOTAL    ACTIVE      SIZE               RECLAIMABLE
Images            13       7           6.4 GB              7.2 MB (88%)
Containers        8        0           42.85 MB            42.85 MB (100%)
Local Volumes     5        5           3.541 GB            0 B (0%)

如上,镜像占了6.4GB, 容器占了42.85 MB, 数据卷占了3.541 GB。 了解基本占用后,我们就可以用下面介绍的命令进行针对性的清理了。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

找到Dockers数据与进程

要清理docker,就要知道docker数据在哪,具体有哪些docker进程。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

  1. docker images 列出docker镜像;
  2. docker ps 列出docker容器;
  3. docker volume ls 列出docker数据卷;
  4. docker network ls 列出docker网络;
  5. docker info 列出容器镜像的数量以及一些docker 安装等系统信息。

清除未使用的数据与进程

docker提供了一些快捷的命令去清除未使用的容器,网络和镜像:文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

$ docker system prune
WARNING! This will remove:
        - all stopped containers
        - all networks not used by at least one container
        - all dangling images
        - all dangling build cache
Are you sure you want to continue? [y/N]

默认是没有清除数据卷的功能,由于数据比较重要,防止意外删除一些数据。可以通过--volumes指定。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

同时,我们还可以将—all清除未使用的images。使用--force免确认。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

$ docker system prune --all --volumes
WARNING! This will remove:
        - all stopped containers
        - all networks not used by at least one container
        - all volumes not used by at least one container
        - all images without at least one container associated to them
        - all build cache
Are you sure you want to continue? [y/N]

当然,我们也可以单独清除。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

  • docker container prune 清除停止的容器;
  • docker volume prune 清除未使用的数据卷;
  • docker image prune 清除未使用的镜像;

清除所有数据重置docker

上面的命令不会影响运行中的容器以及关联的镜像,数据卷和网络。如果你需要全部清理就需要将所有容器都停止下来。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

使用docker container stop [CONTAINERS...]能停止正在运行的容器。同时我们可以通过下面命令获取正在运行的容器ID。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

$ docker container ls -aq
  • ls 列出所有容器;
  • --all / -a列出所有容器(包含未运行的);
  • --quiet / -q 只显示容器ID;

于是我们可以使用下面命令停止所有容器:文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

$ docker container stop $(docker container ls -a -q)

结合清除的命令,完整的清除所有的容器命令如下:文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

$ docker container stop $(docker container ls -a -q) && docker system prune -a -f --volumes

同理,我们可以想到:文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

  • 清除容器 docker container rm $(docker container ls -a -q) / docker rm $(docker ps -a -q);
  • 清除镜像 docker image rm $(docker images ls -a -q);
  • 清除数据卷 docker volume rm $(docker volume ls -q);
  • 清除网络 docker network rm $(docker network ls -q);

限制容器日志大小

很多时候,我们发现我们都是被日志文件撑爆的,解决问题的源头就是限制容器日志大小,方法有三:文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

  • 修改daemon.json配置;
    {
        "log-opts": {
            "max-size" : "521m"
        }
    }
    
  • 修改docker-compose
    ubuntu:
      image: ubuntu
      restart: always
      logging:
        driver: "json-file"
        options:
          max-size: "1g"
    
  • 通过参数;
    $ docker run -d --log-opt max-size=1g ubuntu
    

其他常见的有关清理命令

  • 清除指定日志文件;

    如果你要删除指定容器的日志,只有几步即可。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

    # 获取指定的容器ID, 可通过docker ps 查看 如:2ed640d8fcd1 
    # 获取该容器的日志地址
    $ docker inspect 2ed640d8fcd1  --format '{{.LogPath}}'
    /mnt/data/docker/containers/2ed640d8fcd1bd464a23be78513d23be1807c8ad6a95116da5cb9118a6b2380a/2ed640d8fcd1bd464a23be78513d23be1807c8ad6a95116da5cb9118a6b2380a-json.log
    

    知道了日志地址,你就可以删除或清空该日志了,不过注意权限哦~

  • 杀死所有正在运行的容器;
    $ docker kill $(docker ps -a -q)
    
  • 删除所有已经停止的容器;
    $ docker rm $(docker ps -a -q)
    
  • 删除未打标签的镜像;
    $ docker rmi $(docker images -q -f dangling=true)
    
  • 批量删除指定镜像/容器等;

    我们可以通过--format指出docker命令的输出形式,通过grep去筛选,然后删除。 如:文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

    # 删除带有指定 hub.docker.com 仓库的镜像
    $ docker rmi $(docker images --format '{{.Repository}}' | grep 'hub.docker.com')
    # 杀掉带有ubuntu 镜像名字的容器
    $ docker kill $(docker ps -a --format '{{.Images}}' | grep 'ubuntu')
    

    当使用Docker进行日常开发和部署时,我们经常会遇到需要进行清理操作的情况。在前面的部分,我们介绍了一些有效的Docker清理操作,包括查看磁盘使用情况、找到Docker数据与进程、清除未使用的镜像、容器、数据卷和网络,以及重置Docker和限制容器日志大小等。现在,让我们继续探讨一些其他常见的Docker清理命令和一些建议。

清除未使用的构建缓存

在使用Docker构建镜像时,会生成一些中间构建映像和缓存。这些构建缓存可能会占据大量磁盘空间,尤其是在多次构建镜像后。为了释放磁盘空间,可以使用docker builder prune命令清除未使用的构建缓存。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

$ docker builder prune

这将删除所有未使用的中间构建映像和缓存,帮助你释放宝贵的磁盘空间。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

清除悬空的卷和网络

有时,Docker中可能会存在一些悬空的卷和网络,即它们不再与任何容器关联,但仍然占据磁盘空间或系统资源。为了清理这些未使用的卷和网络,可以使用docker volume prunedocker network prune命令。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

$ docker volume prune
$ docker network prune

这些命令会删除所有未与任何容器关联的数据卷和网络,确保你的系统资源得到充分利用。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

清除未打标签的镜像

在使用Docker构建和使用镜像的过程中,可能会产生一些未打标签的镜像。这些镜像没有与任何标签关联,因此很难进行管理和识别。为了清理这些未打标签的镜像,可以使用docker image prune命令。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

$ docker image prune

这将删除所有未打标签且没有与任何容器关联的镜像,使你的镜像列表更加整洁。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

清除停止的容器

当我们停止容器后,这些容器将保留在系统中,占据磁盘空间。如果这些容器不再需要,可以通过docker container prune命令清除停止的容器。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

$ docker container prune

这将删除所有已停止的容器,释放磁盘空间和系统资源。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

自动清理策略

除了手动执行清理命令外,还可以通过配置Docker自动执行清理操作。在Docker的配置文件daemon.json中,可以设置一些参数来定义自动清理策略。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

例如,可以设置镜像和容器的过期时间,使其自动清理。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

{
  "image-prune-filters": {
    "until": "24h"
  },
  "container-prune-filters": {
    "until": "24h"
  }
}

上述配置将清理所有超过24小时未使用的镜像和容器。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

此外,还可以设置日志的最大大小和日志文件的保留时间,以限制日志文件的增长。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

{
  "log-opts": {
    "max-size": "100m",
    "max-file": "10"
  }
}

上述配置将限制每个日志文件的最大大小为100MB,并保留最多10个日志文件。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

通过自动清理策略,可以定期清理不再需要的镜像、容器和日志,保持系统的整洁和良好的性能。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

总结

Docker清理是日常维护工作中不可或缺的一部分。通过清除未使用的镜像、容器、网络、数据卷和构建缓存,以及设置自动清理策略,可以释放磁盘空间,优化系统性能,并保持Docker环境的可靠性和稳定性。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

在进行任何清理操作之前,请确保你理解清理命令的含义,并仔细考虑清除的资源是否真的不再需要。不正确地清理可能导致数据丢失或其他意外情况。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html

作者:啵啵肠
来源:稀土掘金文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html
文章源自菜鸟学院-https://www.cainiaoxueyuan.com/yunwei/51825.html
  • 本站内容整理自互联网,仅提供信息存储空间服务,以方便学习之用。如对文章、图片、字体等版权有疑问,请在下方留言,管理员看到后,将第一时间进行处理。
  • 转载请务必保留本文链接:https://www.cainiaoxueyuan.com/yunwei/51825.html

Comment

匿名网友 填写信息

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen:

确定