六虎

如何减少40%的Docker构建时间

如何减少40%的Docker构建时间

作者：

沉默王二

在

怎么削减40%的Docker构建时刻

跟着Docker的普及，许多公司的产品会将组件构建为Docker镜像。但跟着时刻的推移，一些镜像变得越来越大，对应的CI构建也变得越来越慢。

假如能在喝完一杯咖啡的时刻（不超越5分钟）内完成构建，将是一个抱负状况。不然，则会减慢开发人员的生产力。

本篇文章带我们通过两个小的改动，来提高Docker的构建时刻。

Docker最佳实践

在解说改动之前，首先要确保遵循了编写Dockerfile的最佳实践：

  • 容器应该是短暂的；
  • 镜像层数尽或许少；
  • 运用多阶段构建；
  • 运用最小的根底镜像；
  • 防止装置不必要的包；
  • 一个容器只运行一个进程；
  • 将多行参数排序；
  • 构建缓存；
  • …

Buildkit

Buildkit是改进后的后端，用于替代传统的Docker构建器。自2018年起，它现已与Docker绑缚在一起，并成为Docker引擎23.0版别的默认构建器。

它供给了一些特殊的功用：

  • 改进的缓存才能；
  • 并行构建不同的层；
  • 延迟拉取根底镜像（≥Buildkit 0.9）；

运用Buildkit时，会发现docker build指令的输出看起来更清晰、更结构化。

在Docker版别低于23.0时，运用Buildkit的一种典型办法是设置Buildkit参数如下：

DOCKER_BUILDKIT=1 docker build --platform linux/amd64 . -t someImage:someVersion
DOCKER_BUILDKIT=1 docker push someImage:someVersion

Buildx

Buildx是Docker的一个插件，能够充分利用Docker中的Buildkit的潜力。它的创立是由于Buildkit支持许多新的装备选项，不能全部以向后兼容的办法集成到docker build指令中。

除了构建镜像之外，Buildx还支持管理多个构建器。这在CI中非常有用，能够定义具有不同装备的效果域环境，由于它们不会修改同享的Docker看护程序。

能够依照以下办法开始运用Buildx：

docker buildx create --bootstrap --name builder
docker buildx use builder

长途缓存

加快构建速度的榜首种办法是将镜像缓存在长途注册表中。这样，即便构建在不同的机器上履行（通常在CI中会这样），也能够从构建缓存中获益。

作为一种解决办法，许多人在构建新的镜像版别之前拉取了最新版别的镜像。优点是能够以拉取完整镜像的价值来缓存未更改的层。拉取完整镜像或许需求一些时刻，但也不能确保层能够被重用。

为了说明这一点，能够运用以下指令：

docker pull someImage:latest || true
docker build --platform linux/amd64 . 
-t someImage:someVersion 
-f Dockerfile 
--cache-from someImage:latest

运用Buildx，能够将缓存信息存储在长途方位（例如容器注册表、Blob存储等）中。构建器将检查给定的层是否现已存在，假如存在，则会从头运用它，而不是再次创立它。

乃至能够在不将层拉取到本地的情况下完成此操作。为了能够从此机制中获益，我们对从前的指令进行了改进：

docker buildx build --platform linux/amd64 . 
-t someImage:someVersion --push 
--cache-to type=registry,ref=someCachedImage:someVersion,mode=max
--cache-from type=registry,ref=someCachedImage:someVersion

形式“max”表明为每个层存储构建信息，乃至包含在生成的镜像中未运用的层（例如在运用多阶段构建时）。默认情况下运用“min”形式，它仅存储关于终究镜像中存在的层的构建信息。

缓存的一个特殊情况是将缓存数据“内联”存储，这意味着它将与镜像一起被缓存。即便在不运用Buildx的情况下运用Buildkit时，该选项也是支持的。它是最简单运用的办法，但在运用多阶段构建时更加扎手，而且它不能清晰地区别输出的工件和缓存。

将缓存数据“内联”存储的指令如下所示：

docker buildx build --platform linux/amd64 . 
-t someImage:someVersion --push 
--cache-to type=inline,mode=max 
--cache-from someImage:somePreviousVersion

增加文件到Docker镜像的新办法

Docker引入了一种新版别的语法来编写Dockerfile，即：#syntax=docker/dockerfile:1.4。它为COPY和ADD指令供给了额定的链接选项。

曾经，当运用COPY或ADD指令时，构建器会创立一个新的快照，将新文件与已存在的文件体系合并。成果是，在履行此操作之前，所有父层都需求存在，不然方针目录或许尚不存在。

终究，镜像（构建指令的成果）将由每个层的tarball组成，其间包含各个快照之间的差异。

FROM baseImage:version
COPY binary /opt/

运用链接选项时，新文件将放置在它们自己的快照中，而不依赖于从前的层。链接的文件存储在它们自己的tarball中，而且不依赖于现有的文件体系，如下图所示。

怎么削减40%的Docker构建时刻

# syntax=docker/dockerfile:1.4
FROM baseImage:version
COPY [--chown=<user>:<group>] [--chmod=<perms>] --link binary /opt/

主要优势是文件不再依赖于从前的层。只需文件没有更改，层就能够被重复运用，即便父层发生了变化。

此外，这也能够提高构建速度，由于现在能够并行履行多个层的数据仿制。

小论

本文介绍了两种小的改动，能够让整个Docker构建时刻大幅缩减的办法，希望在实践的过程中对我们有所帮助。这两个小改动分别是：

  • 将构建缓存信息存储在长途方位；
  • 在将文件增加、仿制到docker镜像时运用链接选项；

当然，在运用Docker时，关于Dockerfile编写的最佳实践，我们也要留意一下。

更多文章