【Docker】Docker 基础
Docker 简介
Docker 理念
Docker 是基于Go语言实现的云开源项目。Docker 的主要目标是“Build, Ship[ and Run Any App,Anywhere",也就是通过对应用组件的封装、分发、部署、运行等生命期的管理,使用户的APP (可以是一个WEB应用或数据库应用等等)及其运行环境能够做到“一次封装,到处运行”。
Linux容器技术的出现就解决了这样一一个问题,而Docker就是在它的基础上发展过来的。将应用运行在Docker容器上面,而Docker容器在任何操作系统上都是一致的,这就实现了跨平台、跨服务器。只需要一次配置好环境,换到别的机器上就可以一键部署好,大大简化了操作。
一句话:Docker 是解决了运行环境和配置问题的软件容器,方便做持续集成并有助于整体发布的容器虚拟化技术
之前的虚拟机技术
虚拟机(virtual machine)就是带环境安装的一种解决方案。
它可以在一种操作系统里面运行另一种作系统,比如在Windows系统里面运行Linux系统。应用程序对此毫无感知,因为虚拟机看上去跟真实系统一模一样,而对于底层系统来说,虚拟机就是一个普通文件,不需要了就删掉,对其他部分毫无影响。这类虚拟机完美的运行了另一套系统,能够使应用程序,操作系统和硬件三者之间的逻辑不变。
虚拟机的缺点:
- 资源占用多
- 冗余步骤多
- 启动慢
容器虚拟化技术
由于前面虛拟机存在这些缺点,Linux 发展出了另一种虚拟化技术: Linux 容器(Linux Containers,缩为LXC)。
Linux 容器不是模拟一个完整的操作系统,而是对进程进行隔离。有了容器,就可以将软件运行所的所有资源打包到一个隔离的容器中。容器与虚拟机不同,不需要捆绑一整套操作系统,只需要软件工作所需的库资源和设置。系统因此而变得高效轻量并保证部署在任何环境中的软件都能始终如一地运行。
比较Docker和传统虚拟化方式的不同之处:
- 传统虚拟机技术是虚拟出一套硬件后,在其上运行一个完整操作系统,在该系统上再运行所需应用进程。
- 而容器内的应用进程直接运行于宿主的内核,容器内没有自己的内核,而且也没有进行硬件虚拟。因此容器要比传统虚拟机为轻便。
- 每个容器之间互相隔离,每个容器有自己的文件系统,容器之间进程不会相互影响,能区分计算资源。
开发/运维(DevOps)
一次构建、随处运行。
更快速的应用交付和部署
传统的应用开发完成后,需要提供一堆安装程序和配置说明文档,安装部署后需根据配置文档进行繁杂的配置才能正常运行。Docker化之后只需要交付少量容器镜像文件,在正式生产环境加载镜像并运行即可,应用安装配置在镜像里已经内置好,大大节省部署配置和测试验证时间。
更便捷的升级和扩缩容
随着微服务架构和Docker的发展,大量的应用会通过微服务方式架构,应用的开发构建将变成搭乐高积木一样,每个Docker容器将变成一块“积木”,应用的升级将变得非常容易。当现有的容器不足以支撑业务处理时,可通过镜像运行新的容器进行快速扩容,使应用系统的扩容从原先的天级变成分钟级甚至秒级。
更简单的系统运维
应用容器化运行后,生产环境运行的应用可与开发、测试环境的应用高度–致,容器会将应用程序相关的环境和状态完全封装起来,不会因为底层基础架构和操作系统的不一致性给应用带来影响,产生新的BUG。当出现程序异常时,也可以通过测试环境的相同容器进行快速定位和修复。
更高效的计算资源利用
Docker是内核级虚拟化,其不像传统的虚拟化技术一样 需要额外的Hypervisor支持,所以在一台物理机上可以运行很多个容器实例,可大大提升物理服务器的CPU和内存的利用率。
Docker 的基本组成
Docker架构图:
镜像(image)
Docker镜像(lmage)就是一个只读的模板。镜像可以用来创建Docker容器,一个镜像可以创建很多容器。
通过 docker run imageName/imageID
命令可以创建并运行某一个镜像的容器实例(可以创建多个容器实例)。
容器(container)
Docker利用容器(Container)独立运行的一个或一组应用。容器是用镜像创建的运行实例。它可以被启动、开始、停止、删除。每个容器都是相互隔离的、保证安全的平台。
可以把容器看做是一个简易版的Linux环境(包括root用户权限、进程空间、用户空间和网络空间等)和运行在其中的应用程序。容器的定义和镜像几乎一模一样,也是一堆层的统一视角, 唯一区别在于容器的最上面那一层是可读可写的。
通过 docker commit containerID imageName:tag
命令可以创建出某个容器实例对应的镜像文件,从而将自己自定义的环境进行打包发布。
仓库(repository)
仓库(Repository)是集中存放镜像文件的场所。仓库(Repository)和仓库注册服务器(Registry) 是有区别的。仓库注册服务器上往往存放着多个仓库,每个仓库中又包含了多镜像,每个镜像有不同的标签(tag) 。
仓库分为公开仓库(Public) 和私有仓库(Private) 两种形式。最大的公开仓库是Docker Hub(ttps://hub. docker.com/)。存放了数量庞大的镜像供用户下载。国内的公开仓库包括阿里云、网易云等
总结
需要正确的理解仓储/镜像/容器这几个概念:
Docker本身是一个容器运行载体或称之为管理引擎。我们把应用程序和配置依赖打包好形成一个可交付的运行环境,这个打包好的运行环境就似乎image镜像文件。只有通过这个镜像文件才能生成Docker容器。image文件可以看作是容器的模板。Docker根据image文件生成容器的实例。同一个image文件,可以生成多个同时运行的容器实例。
一个容器运行一种服务,当我们需要的时候,就可以通过Docker客户端创建一个对应的运行实例,也就是我们的容器。至于仓储,就是放了一堆镜像的地方,我们可以把镜像发布到仓储中,需要的时候从仓储中拉下来就可以了。
Docker 底层原理
Docker 是怎样工作的
Docker是一个Client-Server结构的系统,Docker守护进程运行在主机上,然后通过Socket连接从客户端访问,守护进程从客户端接受命令并管理运行在主机上的容器。容器,是一个运行时环境,就是我们前面说到的集装箱。
为什么 Docker 比 VM 快
Docker有着比虚拟机更少的抽象层。由于Docker不需要Hypervisor实现硬件资源虚拟化,运行在Docker容器上的程序直接使用的都是实际物理机的硬件资源。因此在CPU、内存利用率上Docker将会在效率上有明显优势。
Docker利用的是宿主机的内核,而不需要Guest OS*。因此,当新建一个容器时,Docker不需要和虚拟机一样重新加载一个操作系统内核仍而避免引导、加载操作系统内核返个比较费时费资源的过程,当新建一个虚拟机时,虚拟机软件需要加载GuestOS,返个新建过程是分钟级别的。而Docker由于直接利用宿主机的操作系统,则省略了返个过程,因此新建一个Docker容器只需要几秒钟。
Docker 安装
Docker官网: https://www.docker.com/; Docker中文网站: https://www.docker-cn.com/; Docker Hub官网:https://hub.docker.com/
- CentOS 7 安装 Docker:
1 | yum install -y docker |
- 开启 Docker 服务:
1 | systemctl start docker.service |
- 查看安装结果:
1 | docker version |
- 设置开机启动:
1 | systemctl enable docker.service |
- 配置 docker 镜像下载加速。编辑配置⽂件:
1 | vim /etc/docker/daemon.json |
在其中加入加速镜像源地址即可(https://cr.console.aliyun.com/cn-hangzhou/instances/mirrors):
1 | { |
加完加速地址后,重新加载配置⽂件,重启docker 服务即可:
1 | systemctl daemon-reload |
Docker 常用命令
基础命令
1 | docker version # 查看docker的版本信息 |
命令的帮助文档地址:https://docs.docker.com/engine/reference/commandline/docker/
镜像命令
docker images
查看本地主机的所有镜像:
1 | [root@iZwz99sm8v95sckz8bd2c4Z ~]$ docker images |
docker search
搜索DockerHub仓库中的镜像:
1 | [root@iZwz99sm8v95sckz8bd2c4Z ~]$ docker search mysql |
docker pull 镜像名[:tag]
下载镜像:
1 | [root@iZwz99sm8v95sckz8bd2c4Z ~]$ docker pull mysql |
指定版本下载:
1 | [root@iZwz99sm8v95sckz8bd2c4Z ~]$ docker pull mysql:5.7 |
docker rmi
删除镜像:
1 | # 1.删除指定的镜像id |
docker commit
提交容器副本使之称为一个新的镜像:
1 | $ docker commit -m="提交的描述信息" -a="作者" 容器ID 要创建的目标镜像名:[标签名] |
容器命令
docker run
运行容器:
1 | $ docker run [可选参数] image |
以前台方式进入容器,并进行交互:
1 | [root@iZwz99sm8v95sckz8bd2c4Z ~]$ docker run -it centos /bin/bash |
- 退出容器:
1 | # exit 停止并退出容器(后台方式运行则仅退出) |
docker ps
列出运行过的容器:
1 | $ docker ps # 列出当前正在运行的容器 |
docker rm
删除容器:
1 | $ docker rm 容器id # 删除指定的容器,不能删除正在运行的容器,强制删除使用 rm -f |
- 启动和停止容器:
1 | $ docker start 容器id # 启动容器 |
docker run -d xxx
启动守护式容器(在后台运行)
其他常用命令
- 日志的查看
1 | [root@iZwz99sm8v95sckz8bd2c4Z ~]$ docker logs --help |
- 查看容器中的详细信息:
1 | [root@iZwz99sm8v95sckz8bd2c4Z ~]$ docker stats |
- 查看容器中进程信息:
1 | [root@iZwz99sm8v95sckz8bd2c4Z ~]$ docker top c703b5b1911f |
docker inspect
查看容器的元数据(查看容器内部细节):
1 | [root@iZwz99sm8v95sckz8bd2c4Z ~]$ docker inspect 容器id |
- 进入当前正在运行的容器:
因为通常我们的容器都是使用后台方式来运行的,有时需要进入容器修改配置。
方式一:
1 | [root@iZwz99sm8v95sckz8bd2c4Z ~]$ docker exec -it c703b5b1911f /bin/bash |
方式二:
1 | [root@iZwz99sm8v95sckz8bd2c4Z ~]$ docker attach c703b5b1911f |
区别:
docker exec
进入容器后开启一个新的终端,可以在里面操作docker attach
进入容器正在执行的终端,不会启动新的进程
docker exec 详细参数介绍:https://www.runoob.com/docker/docker-exec-command.html
docker cp
拷贝容器的文件到主机中:
1 | # docker cp 容器id:容器内路径 目的主机路径 |
总结
完整命令示意图:
Docker 镜像
Docker 镜像是一种轻量级、可执行的独立软件包,用来打包软件运行环境和基于运行环境开发的软件,它包含运行某个软件所需的有内容,包括代码、运行时、库、环境变量和配置文件。
UnionFS(联合文件系统)
UnionFS (联合文件系统) : Union文件系统(UnionFS)是一一种分层、轻量级并且高性能的文件系统,它支持对文件系统的修作为一 次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下(unite several directories into a singlevirtualfilesystem)。Union文件系统是Docker镜像的基础。镜像可以通过分层来进行继承,基于基础镜像(没有父镜像)可以制作各种具.体的应用镜像。
特性:一次同时加载多个文件系统,但从外面看起来,只能看到一个文件系统,联合加载会把各层文件系统叠加起来,这样最终的文件系统会包含所有底层的文件和目录
Docker 镜像加载原理
Docker 的镜像实际上由一层一层的文件系统组成,这种层级的文件系统是 UnionFS 联合文件系统。
botfs(boot file system)主要包含bootloader和kernel,bootloader主要是引导加载kernel,Linux刚启动时会加载bootfs文件系统,在Docker镜像的最底层是bootfs。这一层与我们典型的Linux/Unix系统是一样的,包含boot加载器和内核。当boot加载完成之后整个内核就都在内存中了,此时内存的使用权己由bootfs转交给内核,此时系统也会卸载bootfs。
rootfs (root file system),在bootfs之上。 包含的就是典型Linux系统中的 /dev, /proc, /bin, /etc 等标准目录和文件。rootfs就是各种不同的操作系统发行版,比如Ubuntu,Centos等等。
平时我们安装的虚拟机的Centos都是好几个G ,为什么Docker这里才要200M?
对于一个精简的OS,rootfs可 以很小,只需要包括最基本的命令、工具和程序库就可以了,因为底层直接用Host的kernel,自只需要提供rootfs就行了。由此可见对于不同的linux发行版,bootfs基本是一致的,rootfs会有差别,因此不同的发行版可以公用bootfs。
分层的镜像
下载一个镜像时,可以看到是分层下载的:
为什么 Docker 镜像要采用这种分层结构
最大的一个好处就是共享资源。比如:有多个镜像都从相同的base镜像构建而来,那么宿主机只需在磁盘上保存一份base镜像,同时内存中也只需加载一份base镜像,就可以为所有容器服务了。而且镜像的每一层都可以被共享。
特点:Docker镜像都是只读的,当容器启动时,一个新的可写层被加载到镜像的顶部,这一层通常被称为容器层,容器层之下都叫镜像层。
Docker 镜像 Commit 操作
docker commit
提交容器副本使之称为一个新的镜像:
1 | $ docker commit -m="提交的描述信息" -a="作者" 容器ID 要创建的目标镜像名:[标签名] |
案例:提交 Tomcat 镜像
由于默认的Tomcat镜像的webapps文件夹中没有任何内容,需要从webapps.dist中拷贝文件到webapps文件夹。下面自行制作镜像:就是从webapps.dist中拷贝文件到webapps文件夹下,并提交该镜像作为一个新的镜像。使得该镜像默认的webapps文件夹下就有文件。具体命令如下:
1 | # 1.复制文件夹 |
Docker 容器数据卷
Docker的理念:将运用与运行的环境打包形成容器运行。运行可以伴随着容器,但是我们对数据的要求希望是持久化的,容器之间希望有可能共享数据。
Docker容器产生的数据,如果不通过docker commit
生成新的镜像,使得数据做为镜像的一部分保存下来,那么当容器删除后,数据自然也就没有了。为了能保存数据在docker中我们使用卷。
有点类似我们Redis里面的rdb和aof文件
卷就是目录或文件,存在于一个或多个容器中,由Docker挂载到容器,但不属于联合文件系统,因此能够绕过Union FileSystem提供一些用于持续存储或共享数据的特性:
卷的设计目的就是数据的持久化,完全独立于容器的生存周期,因此Docker不会在容器被删除时删除其挂载的数据卷。特点:
- 数据卷可在容器之间共享或重用数据
- 卷中的更改可以直接生效
- 数据卷中的更改不会包含在镜像的更新中
- 数据卷的生命周期一直持续到没有容器使用它为止
容器的持久化:容器间继承 + 共享数据
添加数据卷方式一:命令行
1 | $ docker run -it -v /宿主机绝对路径目录:/容器内目录 镜像名 |
查看数据卷是否挂载成功:
使用数据卷即可实现容器和宿主机之间数据共享。
添加数据卷方式二:DockerFile 添加
在 Dockerfile 文件中使用VOLUME
指令来给镜像添加一个或多个数据卷:
注意,该文件中写的路径是在容器中的路径,宿主机上关联的对应路径是随机生成的名称,不包含在该文件中(出于可移植和共享的考虑)。
docker build
后生成镜像:
对应的宿主机中关联的目录需要使用 docker inspect 镜像id
进行查看:
Docker挂载主机目录Docker访问如果出现cannot open directory . Permission denied。解决办法:在挂载目录后多加一个
--privileged=true
参数即可
数据卷容器
某个容器挂载数据卷,其它容器通过挂载这个(父容器)实现数据共享,挂载数据卷的这个容器,称之为数据卷容器。
即某个容器挂在了数据卷,其他容器使用 --volumes-from
参数继承自该容器,则这些容器都可以共享同一份数据,称这个父容器为数据卷容器。之后即使删除了父容器,之前“继承”出的子容器也仍然能共享那些数据。
结论:容器之间配置信息的传递,数据卷的生命周期一直持续到没有容器使用它为止
DockerFile 解析
Dockerfile 是用来构建Docker镜像的构建文件,由一系列命令和参数构成的脚本。
从应用软件的角度来看,Dockerfile、 Docker镜像与Docker容器分别代表软件的三个不同阶段:
- Dockerfile是软件的原材料
- Docker镜像是软件的交付品
- Docker容器则可以认为是软件的运行态
Dockerfile面向开发,Docker镜像成为交付标准,Docker容器则涉及部署与运维,三者缺一不可,合力充当Docker体系的基石。
- Dockerfile,需要定义一个Dockerfile,Dockerfile定义了进程需要的一切东西。Dockerfile涉及的内容包括执行代码或者是文件、环境变量、依赖包、运行时环境、动态链接库、操作系统的发行版、服务进程和内核进程(当应用进程需要和系统服务和内核进程打交道,这时需要考虑如何设计namespace的权限控制)等等
- Docker镜像,在用Dockerfile定义文件之后,
docker build
时会产生一个Docker镜像,当运行Docker镜像时,会真正开始提供服务 - Docker容器,容器是直接提供服务的
Docker 执行 Dockerfile 的大致流程
- docker 从基础镜像运行一个容器
- 执行一条指令并对容器作出修改
- 执行类似
docker commit
的操作提交一个新的镜像层 - docker再基于刚提交的镜像运行一个新容器
- 执行dockerfile中的下一条指令直到所有指令都执行完成
DockerFile 体系结构(保留字指令)
案例
Base 镜像(scratch)
Docker Hub中 99%的镜像都是通过在base镜像中安装和配置需要的软件构建出来的
自定义镜像 mycentos
- 编写Dockerfile文件:
1 | FROM centos |
- 构建镜像文件:
docker build -t 新镜像名字:TAG .
- 运行:
docker run -it 新镜像名字:TAG
- 列出镜像的变更历史:
docker history 镜像名
Docker 镜像推送到阿里云
本地镜像发布到阿里云流程:
生成镜像
从配置好环境的容器中打包创建一个新的镜像:
1 | docker commit [OPTIONS] 容器ID [REPOSITORY[:TAG]] |
将本地镜像推送到阿里云
- 创建阿里云镜像仓库:
- 将镜像推送到 registry:
1 | $ sudo docker login --username=white3e registry.cn-shenzhen.aliyuncs.com |
- 公有云查询信息: