docker - 在并行 buildkit 构建后手动组织 overlay2 docker 层

Question

我正在使用带有 buildkit 和多阶段构建的 docker 来并行创建许多 conda 环境，然后将它们复制到我的最后阶段。许多层具有大量复杂的依赖关系，并且将每个环境复制到最后阶段需要很长时间。

一个例子：

FROM custom.docker.repo:4567/custom/conda/env:latest as conda

FROM conda as foo
COPY lib/foo/environment.yml /tmp/foo.yml
RUN conda env update -f /tmp/foo.yml && conda clean -afy

FROM conda as bar
COPY lib/bar/environment.yml /tmp/bar.yml
RUN conda env update -f /tmp/bar.yml && conda clean -afy

FROM conda as baz
COPY lib/baz/environment.yml /tmp/baz.yml
RUN conda env update -f /tmp/baz.yml && conda clean -afy

FROM conda as final
COPY --from=foo /opt/conda/envs/foo /opt/conda/envs/foo
COPY --from=bar /opt/conda/envs/bar /opt/conda/envs/bar
COPY --from=baz /opt/conda/envs/baz /opt/conda/envs/baz

....

我知道中间层没有重叠的文件，并且希望将它们直接“挑选”到最后阶段的历史记录中，而无需使用COPY --from=...命令。使用 docker 或 buildkit 工具可以进行这种类型的低级 overlay2 操作吗？

标签： dockercondadocker-buildkit