一、Docker
1.1Dock是什么
Docker是一个开源的应用容器引擎,基于go语言开发,用于运行容器里的应用。
Docker也可以作为管理容器和镜像的一种工具。
1.2 Docker的组成
-
Docker 主机(Host): 一个物理机或虚拟机,用于运行Docker服务进程和容器,也称为宿主机,node节点
-
Docker 服务端(Server): Docker守护进程,运行docker容器
-
Docker 客户端(Client): 客户端使用 docker 命令或其他工具调用docker API
-
Docker 镜像(Images): 镜像可以理解为创建实例使用的模板,本质上就是一些程序文件的集合
-
Docker 仓库(Registry): 保存镜像的仓库,官方仓库: https://hub.docker.com/,可以搭建私有仓库harbor
-
Docker 容器(Container): 容器是从镜像生成对外提供服务的一个或一组服务,其本质就是将镜像中的程序启动后生成的进程
1.3 Docker和虚拟机的区别
Docker容器 | 虚拟机 | |
特性 | 所有容器共享宿主机内核 | 每个虚拟机都有独立的操作系统和内核 |
隔离性 | 通过namespace实现资源隔离,通过cgroup实现限制资源的最大使用量 | 完全隔离,每个虚拟机都有独立的硬件资源 |
启动速度 | 秒级启动速度 | 分钟级启动速度 |
性能损耗 | 容器相当于宿主机的进程,性能几乎没有损耗 | 需要通过hypervisor虚拟机管理程序对宿主机资源虚拟访问,至少有20%~50%的性能损耗 |
系统支持量(单机) | 单机容量能够支持成百上千个容器 | 单机容量最多支持几十个虚拟机 |
1.4 Docker核心概念
Docker有三个核心概念:镜像、容器和仓库。
1.4.1 镜像
镜像是创建容器的基础。
镜像是一个只读的模板文件,里面包含运行容器中的应用程序所有需要的所有内容(应用程序文件、配置文件、运行库文件、依赖包等)
1.4.2 容器
容器是用镜像运行的实例。
容器可以被创建、启动、停止、删除,每个容器之间默认是相互隔离的。
1.4.3 仓库
仓库是用来保存镜像的地方。
仓库有公有仓库和私有仓库之分。
1.5 Namespace
namespace是Linux系统的底层概念,在内核层实现,即有一些不同类型的命名空间被部署在核内,各个docker容器运行在同一个docker主进程并且共用同一个宿主机系统内核,各docker容器运行在宿主机的用户空间,每个容器都要有类似于虚拟机一样的相互隔离的运行空间,但是容器技术是在一个进程内实现运行指定服务的运行环境,并且还可以保护宿主机内核不受其他进程的干扰和影响,如文件系统空间、网络空间、进程空间等,目前主要通过以下技术实现容器运行空间的相互隔离:
namespace | 系统调用参数 | 隔离内容 |
UTS | CLONE_NEWUTS | 主机名与域名 |
IPC | CLONE_NEWWIPC | 信号量、消息队列和共享内存 |
PID | CLONE_NEWPID | 进程编号 |
NETWORK | CLONE_NEWNET | 网络设备、网络栈、端口等 |
MOUNT | CLONE_NEWNS | 挂载点(文件系统) |
USER | CLONE_NEWUSER | 用户和用户组(3.8以后的内核才支持) |
1.6 验证系统cgroups
Cgroups 最主要的作用,就是限制一个进程组能够使用的资源上限,包括CPU、内存、磁盘、网络带宽等等。此外,还能够对进程进行优先级设置,资源的计量以及资源的控制(比如:将进程挂起和恢复等操作)
Cgroups在内核层默认已经开启,从CentOS 和 Ubuntu 不同版本对比,显然内核较新的支持的功能更多。
Centos 7.6 cgroups:
[root@localhost overlay2]#grep CGROUP /boot/config-3.10.0-693.el7.x86_64
CONFIG_CGROUPS=y
# CONFIG_CGROUP_DEBUG is not set
CONFIG_CGROUP_FREEZER=y
CONFIG_CGROUP_PIDS=y
CONFIG_CGROUP_DEVICE=y
CONFIG_CGROUP_CPUACCT=y
CONFIG_CGROUP_HUGETLB=y
CONFIG_CGROUP_PERF=y
CONFIG_CGROUP_SCHED=y
CONFIG_BLK_CGROUP=y
# CONFIG_DEBUG_BLK_CGROUP is not set
CONFIG_NETFILTER_XT_MATCH_CGROUP=m
CONFIG_NET_CLS_CGROUP=y
CONFIG_NETPRIO_CGROUP=y
1.6.1 cgroups 具体实现
-
blkio: 块设备IO限制
-
cpu: 使用调度程序为 cgroup 任务提供 cpu 的访问
-
cpuacct: 产生 cgroup 任务的 cpu 资源报告
-
cpuset: 如果是多核心的 cpu,这个子系统会为 cgroup 任务分配单独的 cpu 和内存
-
devices: 允许或拒绝 cgroup 任务对设备的访问
-
freezer: 暂停和恢复 cgroup 任务
-
memory: 设置每个 cgroup 的内存限制以及产生内存资源报告
-
net_cls: 标记每个网络包以供 cgroup 方便使用
-
ns: 命名空间子系统
-
perf_event: 增加了对每 group 的监测跟踪的能力,可以监测属于某个特定的 group 的所有线程以及运行在特定CPU上的线程
二、容器
2.1 容器简介
云原生容器是一种技术概念,旨在实现应用程序在云环境中的高效部署、可伸缩性和弹性。
它结合了容器化技术(如Docker)和云计算原则,以支持应用程序的快速开发、部署和管理。
2.2 容器作用
1)容器可以屏敞底层操作系统的差异,让业务应用不管在哪里都是使用容器的环境运行;
2)容器部署起来非常便捷和迅速。
2.3 常用的容器引擎
docker、containerd、podman、rocket
三、安装Docker
前置准备
#关闭防火墙和selinux
systemctl disable firewalld.service --now
setenforce 0
#安装依赖包
yum install -y yum-utils device-mapper-persistent-data lvm2
##依赖包详解##
#yum-utils:提供了 yum-config-manager 工具。
#device mapper: 是Linux内核中支持逻辑卷管理的通用设备映射机制,它为实现用于存储资源管理的块设备驱动提供了一个高度模块化的内核架构。
#device mapper存储驱动程序需要 device-mapper-persistent-data 和 lvm2。
#设置阿里云镜像源
yum-config-manager --add-repo https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
安装Docker
#安装 Docker-CE
yum install -y docker-ce docker-ce-cli containerd.io
#设置为开机自动启动
systemctl enable docker.service --now
安装好的Docker系统有两个程序,Docker服务端和Docker客户端。
其中Docker服务端是一个服务进程,负责管理所有容器。
Docker客户端则扮演着Docker服务端的远程控制器,可以用来控制Docker的服务端进程。
大部分情况下Docker服务端和客户端运行在一台机器上。
查看Docker相关信息
#查看 docker 版本信息
docker version
##详解##
客户端:
- 版本: 24.0.6
- API 版本: 1.43
- Go 版本: go1.20.7
- Git commit: ed223bc
- 构建日期: Mon Sep 4 12:35:25 2023
- 操作系统/架构: linux/amd64
- 上下文: 默认
服务器端:
- Docker 引擎:
- 版本: 24.0.6
- API 版本: 1.43 (最低版本要求 1.12)
- Go 版本: go1.20.7
- Git commit: 1a79695
- 构建日期: Mon Sep 4 12:34:28 2023
- 操作系统/架构: linux/amd64
- 实验特性: false
- containerd:
- 版本: 1.6.24
- Git commit: 61f9fd88f79f081d64d6fa3bb1a0dc71ec870523
- runc:
- 版本: 1.1.9
- Git commit: v1.1.9-0-gccaecfc
- docker-init:
- 版本: 0.19.0
- Git commit: de40ad0
#docker 信息查看
docker info
##信息详解##
客户端:
- 版本: 24.0.6
- 上下文: 默认
- 调试模式: false
- 插件:
- buildx: Docker Buildx (Docker Inc.)
- 版本: v0.11.2
- 安装路径: /usr/libexec/docker/cli-plugins/docker-buildx
- compose: Docker Compose (Docker Inc.)
- 版本: v2.21.0
- 安装路径: /usr/libexec/docker/cli-plugins/docker-compose
服务器端:
- 容器数量: 0
- 运行中: 0
- 暂停: 0
- 已停止: 0
- 镜像数量: 0
- 服务器版本: 24.0.6
- 存储驱动: overlay2
- 底层文件系统: xfs
- 支持 d_type: true
- 使用 metacopy: false
- 本地覆盖层差异: true
- 用户扩展属性: false
- 日志驱动: json-file
- 控制组驱动: cgroupfs
- 控制组版本: 1
- 插件:
- 体积: local
- 网络: bridge host ipvlan macvlan null overlay
- 日志: awslogs fluentd gcplogs gelf journald json-file local logentries splunk syslog
- Swarm: 未激活
- 运行时: io.containerd.runc.v2 runc
- 默认运行时: runc
- Init Binary: docker-init
- containerd 版本: 61f9fd88f79f081d64d6fa3bb1a0dc71ec870523
- runc 版本: v1.1.9-0-gccaecfc
- init 版本: de40ad0
- 安全选项:
- seccomp
- 配置文件: builtin
- 内核版本: 3.10.0-693.el7.x86_64
- 操作系统: CentOS Linux 7 (Core)
- 操作系统类型: linux
- 架构: x86_64
- CPU 核心数: 16
- 总内存: 5.315GiB
- 主机名称: localhost.localdomain
- ID: 8675bebe-6937-41c2-89b0-178de05c15ce
- Docker 根目录: /var/lib/docker
- 调试模式: false
- 实验特性: false
- 不安全的注册表: 127.0.0.0/8
- 启用实时恢复: false
四、Docker镜像操作
4.1 搜索镜像
#格式
docker search 关键字
docker search nginx
#NAME: 列出了搜索结果中各个镜像的名称。
#DESCRIPTION: 描述了每个镜像的简要说明或介绍。
#STARS: 显示了每个镜像的星级评分或受欢迎程度。星级数量越高表示该镜像的受欢迎程度越高。
#OFFICIAL: 表示是否是官方构建的镜像,OK表示是官方构建的。
#AUTOMATED: 表示是否是自动构建的镜像,这个字段没有值表示不是自动构建的。
4.2 获取镜像
#格式
docker pull 仓库名称[:标签]
#如果下载镜像时不指定标签,则默认会下载仓库中最新版本的镜像,即选择标签为 latest 标签。
docker pull nginx
4.3 镜像加速下载
浏览器访问 https://cr.console.aliyun.com/cn-hangzhou/instances/mirrors ,获取镜像加速器配置。
mkdir -p /etc/docker
tee /etc/docker/daemon.json <<-'EOF'
{
"registry-mirrors": ["https://nkx2sh8w.mirror.aliyuncs.com"]
}
EOF
systemctl daemon-reload
systemctl restart docker
4.4 查看镜像信息
镜像下载后存放在 /var/lib/docker
。
Docker 相关的本地资源存放在 /var/lib/docker/ 目录下,其中 containers 目录存放容器信息,image 目录存放镜像信息,overlay2 目录下存放具体的镜像底层文件。
4.4.1 查看下载的镜像文件信息
cat /var/lib/docker/image/overlay2/repositories.json
4.4.2 查看下载到本地的所有镜像
docker images
REPOSITORY: 显示镜像的仓库名称。
TAG: 显示镜像的标签(版本)。
IMAGE ID: 显示镜像的唯一标识符。
CREATED: 显示镜像的创建时间。
SIZE: 显示镜像的大小。
4.4.3 获取镜像详细信息
根据镜像的唯一标识 ID 号(IMAGE ID)获取。
#格式
docker inspect 镜像ID号
#以上文中的IMAGR ID为例
docker inspect bc649bab30d1
●lowerdir是镜像层,目录或者文件是只读的,其实就是rootfs,image layer可以分很多层,所以对应的lowerdir是可以有多个目录
●upperdir是在lowerdir之上的容器层,这层是可读可写的,在启动一个容器时候会进行创建,所有的对容器数据更改都发生在这里层
●MergedDir是表现层,是容器的挂载点
4.4.4 为本地的镜像添加新的标签
#格式
docker tag 名称:[标签] 新名称:[新标签]
4.5 删除镜像
注意:如果该镜像已经被容器使用,正确的做法是先删除依赖该镜像的所有容器,再去删除镜像。
#格式
#方式一
docker rmi 仓库名称:标签 #当一个镜像有多个标签时,只是删除其中指定的标签
#方式二
docker rmi 镜像ID号 #会彻底删除该镜像
#举个例子,删除标签web
docker rmi nginx:web
4.6 存出和载入镜像
4.6.1 存出镜像
将镜像保存为本地文件。
#格式
docker save -o 存储文件名 存储的镜像
docker save -o nginx nginx:latest #存出镜像命名为nginx存在当前目录下
ls -lh
4.6.2 载入镜像
将镜像文件导入到镜像库中。
#格式
#方式一
docker load < 存出的文件
#方式二
docker load -i 存出的文件
docker load < nginx
4.7 上传镜像
以上传到阿里私有云为例
可以使用 docker login 命令来输入用户名、密码和邮箱来完成注册和登录。
在上传镜像之前,还需要先对本地镜像添加新的标签,然后再使用 docker push 命令进行上传。
docker tag nginx:latest registry.cn-hangzhou.aliyuncs.com/cnmmmd/nginx:1.18
docker login --username=xiakejie registry.cn-hangzhou.aliyuncs.com
docker push registry.cn-hangzhou.aliyuncs.com/cnmmmd/nginx:1.18
镜像上传成功
五、Docker 容器操作
5.1 容器创建
将镜像加载到容器的过程。
新创建的容器默认处于停止状态,不运行任何程序,需要在其中发起一个进程来启动容器。
#格式
docker create [选项] 镜像
#常用选项:
-i:让容器开启标准输入接受用户输入命令
-t:让 Docker 分配一个伪终端 tty
-it :合起来实现和容器交互的作用,运行一个交互式
docker create -it nginx:latest /bin/bash
5.2 查看容器的运行状态
docker ps -a #-a 选项可以显示所有的容器
-CONTAINER ID 容器的ID号
-IMAGE 加载的镜像
-COMMAND 运行的程序
-CREATED 创建时间
-STATUS 当前的状态
-PORTS 端口映射
-NAMES 名称
5.3 启动容器
#格式
docker start 容器的ID/名称
docker start web1
docker ps -a
5.4 创建并启动容器 -----docker run命令
5.4.1 简介
可以直接执行 docker run
命令, 等同于先执行 docker create 命令,再执行 docker start 命令。
注意:容器是一个与其中运行的 shell 命令/进程共存亡的终端,命令/进程运行容器运行, 命令/进程结束容器退出。
5.4.2 docker run 启动过程
1)检查本地是否有镜像,如果有则直接使用本地镜像创建容器,如果没有则从仓库拉取镜像再创建容器;
2)在只读的镜像层上挂载一层可读可写的容器层;
3)从docker网桥给容器分配一个虚拟接口和IP地址给容器;
4)使用镜像的默认命令或者指定的命令启动容器,直到容器中pid=1的主进程退出为止。
5.4.3 常用命令
基本格式和常用选项
#基本格式
docker run -d [选项] 镜像名:标签 [容器启动命令]
#常用选项
- `-d`:以后台模式运行容器。
- `-it`:以交互模式运行容器。
- `--name`:为容器指定一个名称。
- `-p`:将容器的端口映射到主机上的特定端口。
- `-P`:随机端口映射
- `-v`:将主机上的目录或文件挂载到容器中。
- `-e`:设置容器的环境变量。
- `--rm`:容器停止后自动删除。
- `--network`:指定容器要使用的网络。
- `--link`:将容器链接到另一个容器。
运用实例
docker run centos:7 /usr/bin/bash -c ls /
docker ps -a
#会发现创建了一个新容器并启动执行一条 shell 命令,之后就停止了
在后台持续运行 docker run 创建的容器,需要在 docker run 命令
之后添加 -d 选项
让 Docker 容器以守护形式在后台运行,并且容器所运行的程序不能结束。
docker run -d centos:7 /usr/bin/bash -c "while true;do echo hello;done"
docker ps -a #可以看出容器始终处于 UP,运行状态
docker run -itd --name test1 centos:7 /bin/bash
#创建容器并持续运行容器
5.4.4 docker run的重启策略
docker run --restart no/always/on-failure/unless-stopped
no:默认的重启策略,不管容器是正常退出还是异常退出,总是不重启容器。
always:不管容器是正常退出还是异常退出,总是重启容器
on-failure:只在容器异常退出时重启容器。on-failure:N 表示容器重启了N次。
unless-stopped:总是重启容器,但不考虑docker服务端启动时就已经退出的容器。
5.5 终止容器运行
#格式
docker stop 容器的ID/名称
#以上文中,处于运行状态的容器为例
docker stop test1
docker ps -a
5.6 容器的进入
需要进入容器进行命令操作时,可以使用 docker exec 命令
进入运行着的容器。
#格式
docker exec -it 容器ID/名称 /bin/bash
-i 选项表示让容器的输入保持打开;
-t 选项表示让 Docker 分配一个伪终端。
docker start web2
#进入容器前,确保容器正在运行
docker exec -it web2 /bin/bash
ls
exit
#退出容器后,容器仍在运行
docker ps -a
docker run -it centos:7 bash #不加 -d 选项会创建容器后直接进入容器进行交互,但是退出容器,容器也会停止
#复制到容器中
echo abc123 > ~/test.txt
docker cp ~/test.txt 110b7685b78c:/opt/
#从容器复制文件到主机
docker cp 2592d3fad0fb:/opt/test.txt ~/abc123.txt
5.7 暴露容器的端口
5.7.1 暴露随机端口
容器启动后,默认处于预定义的NAT网络中,所以外部网络的主机无法直接访问容器中网络服务docker run -P 可以将事先容器预定义的所有端口映射宿主机的网卡的随机端口,默认从32768开始使用随机端口 时,当停止容器后再启动可能会导致端口发生变化
-P , --publish-all= true | false默认为false
#示例:
docker run -P docker.io/nginx #映射容器所有暴露端口至随机本地端口
docker port 可以查看容器的端口映射关系
例子: P随机映射端口
[root@localhost opt]#docker run -d -P --name web1 nginx
#启动进程并暴露端口
7c59e4cb7a11ca5d9410b32e68b4bad565fda0a8773e6559836a3e6b30834b46
[root@localhost opt]#docker port web1
80/tcp -> 0.0.0.0:32768
80/tcp -> [::]:32768
5.7.2 指定端口映射
docker run -p 可以将容器的预定义的指定端口映射到宿主机的相应端口
注意: 多个容器映射到宿主机的端口不能冲突,但容器内使用的端口可以相同
例子1:将容器的 80 端口映射成 宿主机的 81 端口
[root@localhost opt]#docker run -p 81:80 --name web1 nginx
例子2:指定ip地址 的 端口映射, 只可以访问固定端口的 容器
[root@localhost opt]#docker run -p 192.168.10.10:81:80 --name web1 nginx
例子3: 宿主机本机ip:宿主机本地端口:容器端口/协议,默认为tcp协议
docker run -p 10.0.0.100:83:80/udp --name nginx-test-port5 docker.io/nginx
例子4: 一次性映射多个端口+协议
docker run -p 8080:80/tcp -p 8443:443/tcp -p 53:53/udp --name nginx-test-port6 nginx
实战案例:在不删除的情况下修改已经创建的容器的端口映射关系
[root@ubuntu2204 ~]#docker run -d --name web1 -p 80:80 nginx
a28dca68a99de20aabc6a1df46e76127961894f288c1f2612d51532ee1e145ad
#将容器的80 和宿主机之间的80 做上对应关系
[root@ubuntu2204 ~]#docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
a28dca68a99d nginx "/docker-entrypoint.…" 29 seconds ago Up 28 seconds 0.0.0.0:80->80/tcp, :::80->80/tcp web1
停止docker程序
systemctl stop docker
### 找到文件的容器的位置
[root@ubuntu2204 ~]#ls /var/lib/docker/containers/a28dca68a99de20aabc6a1df46e76127961894f288c1f2612d51532ee1e145ad
a28dca68a99de20aabc6a1df46e76127961894f288c1f2612d51532ee1e145ad-json.log config.v2.json hostname mounts resolv.conf.hash
checkpoints hostconfig.json hosts resolv.conf
[root@ubuntu2204 ~]#vim /var/lib/docker/containers/a28dca68a99de20aabc6a1df46e76127961894f288c1f2612d51532ee1e145ad/hostconfig.json
PortBindings":{"80/tcp":[{"HostIp":"","HostPort":"80"}]}
#PortBindings后80/tcp对应的是容器内部的80端口,HostPort对应的是映射到宿主机的端口80 修改此处为8000
"PortBindings":{"80/tcp":[{"HostIp":"","HostPort":"8000"}]}
systemctl start docker
[root@ubuntu2204 ~]#docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
a28dca68a99d nginx "/docker-entrypoint.…" 6 minutes ago Exited (0) 3 minutes ago web1
[root@ubuntu2204 ~]#docker start web1
web1
[root@ubuntu2204 ~]#docker port web1
80/tcp -> 0.0.0.0:8000
80/tcp -> [::]:8000
5.8 指定DNS
容器的dns服务器,默认采用宿主机的dns 地址,可以用下面方式指定其它的DNS地址
将dns地址配置在宿主机
-
在容器启动时加选项 --dns=x.x.x.x
-
在/etc/docker/daemon.json 文件中指定
容器的DNS默认从宿主机的DNS获取
例子: 指定容器的dns
[root@ubuntu2204 ~]#docker run -it --rm --dns 1.1.1.1 --dns 2.2.2.2 centos bash
[root@bff153d49c4f /]#
[root@bff153d49c4f /]#
[root@bff153d49c4f /]# cat /etc/resolv.conf
# Generated by Docker Engine.
# This file can be edited; Docker Engine will not make further changes once it
# has been modified.
nameserver 1.1.1.1
nameserver 2.2.2.2
search .
# Based on host file: '/run/systemd/resolve/resolv.conf' (legacy)
# Overrides: [nameservers]
[root@bff153d49c4f /]#
5.9 容器内和宿主机之间复制文件
例子:docker cp 命令 容器宿主机之间的拷贝
[root@ubuntu2204 ~]#docker run -itd centos bash
7096e39773a2ef14771a509be57513304116373f8546e699d90f51906526eb81
[root@ubuntu2204 ~]#docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
7096e39773a2 centos "bash" 19 seconds ago Up 18 seconds musing_gagarin
[root@ubuntu2204 ~]#docker cp 7096e39773a2:/etc/hosts /data/
Successfully copied 2.05kB to /data/
[root@ubuntu2204 ~]#docker cp -a /data/ls 7096e39773a2:/
Successfully copied 119kB to 7096e39773a2:/
[root@ubuntu2204 ~]#
[root@ubuntu2204 ~]#
[root@ubuntu2204 ~]#docker exec -it 7096e39773a2 bash
[root@7096e39773a2 /]# ls
bin dev etc home lib lib64 lost+found ls media mnt opt proc root run sbin srv sys tmp usr var