docker镜像和仓库

文章目录

一、docker镜像
- 1、镜像的分层结构
- - （1）、分层结构案例
  - （2）、容器层详解
- 2、镜像的构建
- - （1）、创建一个Dockerfile
  - （2）、构建镜像
  - （3）、查看镜像的分层结构
  - （4）、镜像的缓存特性
- 3、Dockerfile基本语法
- - （1）、dockerfile常用指令
  - （2）、使用举例
- 4、镜像的优化
- 5、镜像常用子命令
二、docker仓库
- 1、什么是仓库
- 2、Docker Hub
- 3、配置镜像加速器
- 4、Registry 工作原理
- 5、搭建私有仓库
- 6、小结
三、报错

一、docker镜像

1、镜像的分层结构

Docker 支持通过扩展现有镜像，创建新的镜像。

（1）、分层结构案例

实际上，Docker Hub 中 99% 的镜像都是通过在 base 镜像中安装和配置需要的软件构建出来的。比如我们现在构建一个新的镜像，Dockerfile 如下：

Version: 0.0.1
1.新镜像不再是从 scratch 开始，而是直接在 Debian base 镜像上构建。
FROM debian                2.安装 emacs 编辑器。
MAINTAINER wzlinux
RUN apt-get update && apt-get install -y emacs  3.安装 apache2
RUN apt-get install -y apache2 4.容器启动时运行 bash
CMD ["/bin/bash"]

构建过程如下图所示：
可以看到，新镜像是从 base 镜像一层一层叠加生成的。每安装一个软件，就在现有镜像的基础上增加一层。

为什么 Docker 镜像要采用这种分层结构呢？

最大的一个好处就是 - 共享资源。

比如：有多个镜像都从相同的 base 镜像构建而来，那么 Docker Host 只需在磁盘上保存一份 base 镜像；同时内存中也只需加载一份 base 镜像，就可以为所有容器服务了。而且镜像的每一层都可以被共享。

这时可能就有人会问了：如果多个容器共享一份基础镜像，当某个容器修改了基础镜像的内容，比如 /etc 下的文件，这时其他容器的 /etc 是否也会被修改？

答案是不会！
修改会被限制在单个容器内。
这就是我们接下来要说的容器 Copy-on-Write 特性。

新数据会直接存放在最上面的容器层。修改现有数据会先从镜像层将数据复制到容器层，修改后的数据直接保存在容器层中，镜像层保持不变。
如果多个层中有命名相同的文件，用户只能看到最上面那层中的文件。

（2）、容器层详解

可写的容器层
当容器启动时，一个新的可写层被加载到镜像的顶部。这一层通常被称作“容器层”，“容器层”之下的都叫“镜像层”。

典型的Linux在启动后，首先将 rootfs 置为 readonly, 进行一系列检查, 然后将其切换为 “readwrite” 供用户使用。在docker中，起初也是将 rootfs 以readonly方式加载并检查，然而接下来利用 union mount 的将一个 readwrite 文件系统挂载在 readonly 的rootfs之上，并且允许再次将下层的 file system设定为readonly 并且向上叠加, 这样一组readonly和一个writeable的结构构成一个container的运行目录, 每一个被称作一个Layer。如下图所示。

所有对容器的改动，无论添加、删除、还是修改文件都只会发生在容器层中。只有容器层是可写的，容器层下面的所有镜像层都是只读的。

下面我们深入讨论容器层的细节。

镜像层数量可能会很多，所有镜像层会联合在一起组成一个统一的文件系统。如果不同层中有一个相同路径的文件，比如 /a，上层的 /a 会覆盖下层的 /a，也就是说用户只能访问到上层中的文件 /a。在容器层中，用户看到的是一个叠加之后的文件系统。

添加文件：在容器中创建文件时，新文件被添加到容器层中。

读取文件：在容器中读取某个文件时，Docker 会从上往下依次在各镜像层中查找此文件。一旦找到，立即将其复制到容器层，然后打开并读入内存。

修改文件：在容器中修改已存在的文件时，Docker 会从上往下依次在各镜像层中查找此文件。一旦找到，立即将其复制到容器层，然后修改之。

删除文件：在容器中删除文件时，Docker 也是从上往下依次在镜像层中查找此文件。找到后，会在容器层中记录下此删除操作。

只有当需要修改时才复制一份数据，这种特性被称作 Copy-on-Write。可见，容器层保存的是镜像变化的部分，不会对镜像本身进行任何修改。

这样就解释了我们前面提出的问题：

容器层记录对镜像的修改，所有镜像层都是只读的，不会被容器修改，所以镜像可以被多个容器共享。

2、镜像的构建

docker commit 构建新镜像三部曲:
运行容器–>修改容器–>将容器保存为新的镜像
缺点：
效率低、可重复性弱、容易出错
使用者无法对镜像进行审计，存在安全隐患

（1）、创建一个Dockerfile

（2）、构建镜像

运行测试进入交互界面，可以检验Dockerfile中的内容是否执行
docker run -it --rm demo:v1

（3）、查看镜像的分层结构

（4）、镜像的缓存特性

3、Dockerfile基本语法

（1）、dockerfile常用指令

FROM
指定base镜像，如果本地不存在会从远程仓库下载。    MAINTAINER
设置镜像的作者，比如用户邮箱等。COPY
把文件从build context复制到镜像
支持两种形式：COPY src dest 和 COPY ["src", "dest"]
src必须指定build context中的文件或目录ADD
用法与COPY类似，不同的是src可以是归档压缩文件，文件会被自动解压到dest，也可以自动下载URL并拷贝到镜像：
ADD html.tar /var/www
ADD http://ip/html.tar /var/wwwVOLUME
申明数据卷，通常指定的是应用的数据挂在点：
VOLUME ["/var/www/html"]ENV
设置环境变量，变量可以被后续的指令使用：
ENV HOSTNAME sevrer1.example.com

RUN
在容器中运行命令并创建新的镜像层，常用于安装软件包：
RUN yum install -y vimCMD 与 ENTRYPOINT
这两个指令都是用于设置容器启动后执行的命令，但CMD会被docker run后面的命令行覆盖，而ENTRYPOINT不会被忽略，一定会被执行。
docker run后面的参数可以传递给ENTRYPOINT指令当作参数。
Dockerfile中只能指定一个ENTRYPOINT，如果指定了很多，只有最后一个有效。

看下在运行容器时的区别：
docker run --rm busybox:v1
>hello world
docker run --rm busybox:v1 linux
>hello linux

数据卷参数VOLUME使用举例：

vim Dockerfile
---
VOLUME ["/data"]添加该行
---
构建镜像使用demo的历史记录
docker build -t demo:v2 .

测试

docker run -it --rm demo:v2
/ # cd /data/
/data # ls
/data # cp /etc/passwd .
/data # ls
passwd新开一个shell登陆该主机
cd docker/
docker ps
docker inspect demo:v2的ip 查看挂载源头的路径
cd 查询到的挂载点
ls 查看发现同步过来了

新shell中

两边的操作对可以同步

（2）、使用举例

素材准备：

cd /docker
cp /etc/yum.repos.d/dvd.repo .
scp root@172.25.76.250:/lamp/nginx-1.21.1.tar.gz .

编辑Dockerfile文件并创建镜像

vim Dockerfile
---
FROM busybox
RUN touch file1
COPY dvd.repo /etc/yum.repos.d/
ADD nginx-1.21.1.tar.gz /mnt/
---docker build -t demo:v1 .

测试

docker run -it --rm demo:v1

4、镜像的优化

优化思想

选择最精简的基础镜像
减少镜像的层数
清理镜像构建的中间产物
注意优化网络请求
尽量去用构建缓存
使用多阶段构建镜像

举例说明
优化前：

FROM rhel7
COPY dvd.repo /etc/yum.repos.d/
ADD nginx-1.21.1.tar.gz /mnt/
WORKDIR "/mnt/nginx-1.21.1"
RUN rpmdb --rebuilddb
RUN yum install -y gcc pcre-devel zlib-devel
RUN ./configure --prefix=/usr/local/nginx
RUN yum install -y make
RUN make
RUN make install
ENV hostname 101
EXPOSE 80
VOLUME ["/usr/local/nginx/html"]
CMD ["/usr/local/nginx/sbin/nginx","-g","daemon off;"]

1、减少镜像层数

将所有的RUN合并
RUN rpmdb --rebuilddb && yum install -y gcc pcre-devel zlib-devel && ./configure --prefix=/usr/local/nginx && yum install -y make && make && make install

2、选择最精简的基础镜像，并使用多阶段构建镜像

FROM rhel7 as build
COPY dvd.repo /etc/yum.repos.d/
ADD nginx-1.21.1.tar.gz /mnt/
WORKDIR "/mnt/nginx-1.21.1"
RUN rpmdb --rebuilddb && yum install -y gcc pcre-devel zlib-devel && ./configure --prefix=/usr/local/nginx && yum install -y make && make && make install FROM ubuntu
COPY --from=build
EXPOSE 80
VOLUME ["/usr/local/nginx/html"]
CMD ["/usr/local/nginx/sbin/nginx","-g","daemon off;"]

3、清理镜像构建的中间产物，使用较大的基础镜像

FROM rhel7 as build
COPY dvd.repo /etc/yum.repos.d/
ADD nginx-1.21.1.tar.gz /mnt/
WORKDIR "/mnt/nginx-1.21.1"
RUN rpmdb --rebuilddb && yum install -y gcc pcre-devel zlib-devel && ./configure --prefix=/usr/local/nginx && yum install -y make && make && make install && rm -fr /mnt/nginx-1.21.1 && yum clean allFROM rhel7
COPY --from=build /usr/local/nginx /usr/local/nginx
EXPOSE 80
VOLUME ["/usr/local/nginx/html"]
CMD ["/usr/local/nginx/sbin/nginx","-g","daemon off;"]

从一个存储文件或一个标准输入流中加载一个镜像
docker load -i [options]

5、镜像常用子命令

镜像常用子命令	意义
images	显示镜像列表
history	显示镜像构建历史
commit	从容器创建镜像
build	从Dockerfile构建镜像
tag	给镜像打标签
search	搜索镜像
pull	从仓库拉取镜像
push	上传镜像到仓库
rmi	删除镜像

二、docker仓库

1、什么是仓库

Docker 仓库是用来包含镜像的位置。

Docker提供一个注册服务器（Register）来保存多个仓库，每个仓库又可以包含多个具备不同tag的镜像。
Docker运行中使用的默认仓库是 Docker Hub 公共仓库。

下面这张图对理解容器镜像Dockerfile注册器之间的关系有很大的帮助，各位亲注意多加理解，不理解也得硬理解。

2、Docker Hub

docker hub是docker公司维护的公共仓库，用户可以免费使用，也可以购买私有仓库。
（1）、新建公共仓库

首先在https://hub.docker.com/网站注册一个账号
在docker hub上新建一个公共仓库docker hub为了区分不同用户的同名镜像，要求镜像的格式是：
docker tag busybox:latest yakexi007/busybox:latest

（2）、登陆

docker login

（3）、上传镜像

上传镜像到docker hub
docker push localhost:5000/webserver

（4）、拉取镜像

从docker hub拉取镜像
docker pull

（5）、删除镜像

docker info查看容器镜像信息

3、配置镜像加速器

从docker hub上下载镜像的速度太慢，需要配置镜像加速器，这里以阿里云为例：(需要提前注册阿里云帐号)

cd /etc/docker
vim daemon.json
上浏览器在阿里云上寻找容器镜像服务，复制镜像加速器地址至文件
systemctl reload docker
systemctl daemon-reload

4、Registry 工作原理

一次docker pull 或 push背后发生的事情

index服务主要提供镜像索引以及用户认证的功能。当下载一个镜像的时候，首先会去index服务上做认证，然后查找镜像所在的registry的地址并放回给docker客户端，docker客户端再从registry下载镜像，在下载过程中 registry会去index校验客户端token的合法性，不同镜像可以保存在不同的registry服务上，其索引信息都放在index服务上。
Docker Registry有三个角色，分别是index、registry和registry client。
index
负责并维护有关用户帐户、镜像的校验以及公共命名空间的信息。

Web UI
元数据存储
认证服务
符号化
registry
是镜像和图表的仓库，它不具有本地数据库以及不提供用户认证，通过Index Auth service的Token的方式进行认证。
Registry Client
Docker充当registry客户端来维护推送和拉取，以及客户端的授权。

5、搭建私有仓库

docker hub虽然方便，但是还是有限制:
需要internet连接，速度慢
所有人都可以访问
由于安全原因企业不允许将镜像放到外网
好消息是docker公司已经将registry开源，我们可以快速构建企业私有仓库

下载registry镜像

下载registry镜像
docker pull registry
查看是否下载成功
docker images registry
运行registry容器
docker run -d -p 5000:5000 registry:2

上传镜像到本地仓库,本地镜像在命名时需要加上仓库的ip和端口

docker tag nginx:latest localhost:5000/nginx:latest
docker push localhost:5000/nginx:latest

生成证书
为Docker仓库添加证书加密功能（域名westos.org要求在主机上有解析）

 mkdir -p certsopenssl11 req -newkey rsa:4096 -nodes -sha256 -keyout certs/westos.org.key -x509 -days 365 -out certs/westos.org.crt

ls
cd certs/
ls

重建registry容器

docker run -d   --restart=always   --name registry   -v "$(pwd)"/certs:/certs   -e REGISTRY_HTTP_ADDR=0.0.0.0:443   -e REGISTRY_HTTP_TLS_CERTIFICATE=/certs/westos.org.crt   -e REGISTRY_HTTP_TLS_KEY=/certs/westos.org.key   -p 443:443   registrydocker ps
docker tag nginx:latest reg.westos.org/nginx:latest
docker push reg.westos.org/nginx:latest

为Docker仓库添加用户认证功能

mkdir auth
yum install -y httpd-tools
htpasswd -Bc auth/htpasswd admin
>New password:
>Re-type new password:
>Adding password for user adminhtpasswd -B auth/htpasswd qb同理
cat auth/htpasswd

重建registry容器
docker run -d   --restart=always   --name registry   -v "$(pwd)"/certs:/certs   -e REGISTRY_HTTP_ADDR=0.0.0.0:443   -e REGISTRY_HTTP_TLS_CERTIFICATE=/certs/westos.org.crt   -e REGISTRY_HTTP_TLS_KEY=/certs/westos.org.key
==-e REGISTRY_AUTH_HTPASSWD_PATH=/auth/htpasswd==新添加的  -p 443:443   registrydocker login reg.westos.org

查看登陆密码（加密过后的密码）

cd /etc/docker
mkdir certs.d
cd certs.d
mkdir reg.westos.org
cd reg.westos.org
cp ~/certs/westos.org.crt ca.crt
docker tag nginx:latest reg.westos.org/nginx:latest
docker push reg.westos.org/nginx:latest
docker login reg.westos.org

生成用户密码文件，docker用户认证

退出登陆后不能看到加密后的密码

docker 仓库搭建

软件下载:https://github.com/goharbor/harbor/releases
部署：（依赖性 docker 17.06.0-ce+ and docker-compose 1.18.0+） tar zxf harbor-offline-installer-v1.10.1.tgz
ls
cd harbor
vim harbor.yml
---
hostname: reg.westos.org
http:port: 80
https:port: 443certificate: /data/certs/westos.org.crtprivate_key: /data/certs/westos.org.key
harbor_admin_password: westos
database:password: westos
---
安装
./install.sh --with-notary --with-clair --with-chartmuseum
./prepare卸载，需要重新安装时先卸载再进行安装，否则会重新安装失败

安装成功后启动harbor仓库
docker-compose start
查看仓库内容
docker-compose ps

镜像签名：https://goharbor.io/docs/1.10/working-with-projects/working-with-images/pulling-pushing-images/
部署根证书：
/etc/docker/certs.d/reg.westos.org/ca.crt
~/.docker/tls/reg.westos.org:4443/ca.crt
启用docker内容信任：
export DOCKER_CONTENT_TRUST=1
export DOCKER_CONTENT_TRUST_SERVER=https://reg.westos.org:4443
上传镜像：
docker push reg.westos.org/library/nginx:latest
...
Enter passphrase for root key with ID e42f679:
Enter passphrase for new repository key with ID 383f503:
删除签名：
docker trust revoke reg.westos.org/library/nginx:latest

部署根证书：

6、小结

docker 仓库子命令	意义
docker search	查询镜像
docker pull	拉取镜像
docker push	上传镜像
docker login	登录仓库
docker logout	登出仓库

三、报错

systemctl restart docker

被占用了咱就删