优化Docker镜像创建

我们优化创建Docker Image的经验以及我们从中学到的东西

上下文

我们的大多数微服务都是基于Python的容器,它们是由持续集成过程创建的。该过程描述如下:


容器生成和容器提升过程

正如您在流程中看到的,只要开发人员提出一个pull请求,集成流程就会启动。在创建镜像时,将对图像运行UT和功能测试。如果他们通过了,PR将提供给同行评审。如果同级审阅者提供了任何注释,那么开发人员将着手解决可能导致新提交的注释,如果出现了这种情况,则会重复该循环。否则,审查员还不如批准pull请求。批准后,提交被标记,再次创建映像,并将生成的映像发布到容器注册中心。

经过仔细分析,优化创建Docker Image实际上有助于我们优化整个过程。因此,我们开始了改进容器构建过程的旅程。

注意:我可以互换使用容器和镜像。我仍然习惯了这些条款


Docker镜像创建过程

让我们了解Docker镜像的创建过程。

首先,我们将看到一个Dockerfile。Docker文件示例如下所示:

#This is a example Dockerfile 
FROM ubuntu 
MAINTAINER myself@somedomain.com 

RUN apt-get update && \
    apt-get -y upgrade
CMD [“echo”,”Image created”]

在上面的Dockerfile中,第一行告诉我们应该从基本镜像创建这个镜像:docker.io/library/ubuntu:latest

下一行添加有关谁维护由于运行docker构建过程而创建的镜像的元数据。

以下行更新容器中的包。

并且最后一行向容器添加另一个元数据,Image created一旦容器启动就回显命令。

以下是docker镜像创建过程的高级表示。


Docker镜像创建过程

当镜像创建过程开始时,docker守护程序所做的第一件事就是检查Dockerfile中指定的基本映像是否在本地计算机中。如果它不在那里,那么它从注册表中提取镜像。然后它移动到docker文件中的下一行。它读取下一行并验证构建缓存中是否存在已在Dockerfile中提及此更改的镜像。如果它有镜像,它将移动到下一行,并重复该过程,直到它遇到Dockerfile中有一条没有缓存镜像的更改的行。“ 绿色”部分描述了相同的过程。

此时或者在没有缓存中间图像的情况下,Docker守护程序创建一个容器,应用行中提到的更改,从中创建一个镜像,然后移动到下一行并重复相同的过程,直到它到达Dockerfile的结尾。这已在“ 桃色 ”盒子中描绘。

请注意:这是Docker Image创建过程的一个非常简化的版本,我故意省略了很多细节,让我们关注


想法

随着我们更多地了解Docker构建过程,我们开始意识到如果我们能够以某种方式最小化构建过程进入“ 桃子 ”部分的次数并最大化它进入“ 绿色 ”部分的次数在构建流程工作流程中,我们可以更快地完成镜像创建过程。

以此为出发点,我们开始分析我们的Dockerfiles。在我们的大多数情况下,Dockerfiles包含以下内容:

1. Base Image
2. Shell Scripts (Entrypoint files)
3. Dependencies (Third Party Libraries)
4. Actual Code/Artifacts related to the Microservice
5. Metadata Information(Maintainer, Ports, etc)

在分析这些内容时,我们意识到这些可归类如下:


我们的Dockerfile组件的分类

这是一个启示。我们现在需要做的就是将Dockerfiles重新组织成以下结构:


Dockerfiles的理想结构

这就是我们所做的!


结果

结果如下:


优化的Dockerfile需要45秒才能生成图像

由于更好地理解了Docker构建过程,这一小改变导致了相当大的优化。

这有什么影响?

  • 优化的镜像创建
  • 优化的构建机器存储,因为Docker使用了缓存的镜像
  • 由于Docker仅提取非缓存层,因此整体部署镜像的速度更快
  • 由于Docker层,再次相对更快地上传到注册表

翻译自:https://medium.com/better-programming/optimizing-docker-image-creation-fa06bb42733d

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 213,186评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,858评论 3 387
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,620评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,888评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,009评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,149评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,204评论 3 412
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,956评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,385评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,698评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,863评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,544评论 4 335
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,185评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,899评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,141评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,684评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,750评论 2 351

推荐阅读更多精彩内容