目录
1、CPU资源控制
cgroups,是一个非常强大的linux内核工具,他不仅可以限制被namespace隔离起来的资源,还可以为资源设置权、计算使用量、操控进程启停等等。所以cgroups(Control groups)实现了对资源的配额和度量。
1.1cgroups四大功能
- 资源限制:可以对任务使用的资源总额进行限制
- 优先级分配:通过分配的cpu时间片数量以及磁盘IO带宽大小,实际上相当于控制了任务运行优先级
- 资源统计:可以统计系统的资源使用量,如cpu时长,内存用量等
- 任务控制:cgroup可以对任务执行挂起、恢复等操作
1.2设置CPU使用率上限
- Linux通过CFS(Completely Fair scheduler,完全公平调度器)来调度各个进程对CPU的使用。CFS默认的调度周期是100ms。
- 我们可以设置每个容器进程的调度周期,以及在这个周期内各个容器最多能使用多少CPU时间。
- 使用--cpu-period 即可设置调度周期,使用--cpu-quota即可设置在每个周期内容器能使用的CPU时间。两者可以配合使用。
CFS周期的有效范围是1ms~1s,对应的--cpu-period 的数值范围是1000~1000000(微秒)。 - 容器的CPU配额必须不小于1ms,即--cpu-quota的值必须>=1000。
查看容器默认CPU使用限制
docker run -itd --name c1 centos:7 /bin/bash
cd /sys/fs/cgroup/cpu/docker/
ls
cd 4f2ffa469e17d8b6e1e2d6c356363b8c9710204748abc769a4fcbd303d74f71f/
cat cpu.cfs_quota_us
----------------------
-1
cat cpu.cfs_period_us
------------
100000
进行压力测试
docker exec -it c1 bash
vi /cpu.sh
------------------------
#!/bin/bash
i=0
while true
do
let i++
done
------------------------
chmod +x cpu.sh #给脚本权限
./cpu.sh #运行脚本
top #查看cpu使用率
另一个终端查看CPU使用率
停止运行脚本
再查看cpu使用率
创建容器时设置CPU使用时间限制
docker run -itd --name test2 --cpu-quota 50000 centos:7
cd /sys/fs/cgroup/cpu/docker/
ls
cd a8c9e47344cb7b98579340f0b05361d9c789dcbcb6160e7874445eec5950bd4e/
cat cpu.cfs_quota_us
---------------------------
50000 最高限额为设置的50000
编写脚本进行测试
docker exec -it test2 bash
vi /cpu.sh
--------------------------
#!/bin/bash
i=0
while true
do
let i++
done
--------------------------
chmod +x cpu.sh
./cpu.sh #执行脚本
容器的CPU使用时间限制设为50000,而调度周期为100000,表示容器占用50000/100000=50%的CPU
对已存在的容器进行CPU限制
直接修改/sys/fs/cgroup/cpu/docker/容器id/cpu.cfs_quota_us文件即可
cd /sys/fs/cgroup/cpu/docker/
ls
cd 4f2ffa469e17d8b6e1e2d6c356363b8c9710204748abc769a4fcbd303d74f71f/
ls
echo "33000" >cpu.cfs_quota_us
cat cpu.cfs_quota_us
#进入c1容器
docker exec -it c1 bash
./cpu.sh #执行刚才创建的脚本
1.3设置cpu资源占用比(设置多个容器时才有效)
Docker 通过--cpu-shares指定CPU份额,默认值为1024,值为1024的倍数
#创建两个容器为t1和t2,若只有这两个容器,设置容器的权重,使得c1和c2的CPU资源占比为1/3和2/3。
docker run -itd --name t1 --cpu-shares 512 centos:7
docker run -itd --name t2 --cpu-shares 1024 centos:7
#进入容器t1,进行压力测试
docker exec -it t1 bash
yum install -y epel-release #安装在线源
yum install -y stress #安装检测软件
stress -c4 #产生四个进程,每个进程都反复不停的计算随机数的平方根
#进入容器t2,进行压力测试
docker exec -it t2 bash
yum install -y epel-release #安装在线源
yum install -y stress #安装检测软件
stress -c 4 #产生四个进程,每个进程都反复不停的计算随机数的平方根
容器t1
容器t2
#查看容器运行状态(动态更新)
docker stats
1.4 设置容器绑定指定的CPU
#先分配虚拟机4个CPU核数
docker run -itd --name c3 --cpuset-cpus 1,3 centos:7 /bin/bash
#--cpuset-cpus:指定绑定核数可以是多个
#注意这里的核号是从0开始 指定的1,3代表第二个核和第四个核
yum install -y epel-release
yum install stress -y
stress -c 4
另一个终端输入top后按1
2 、对内存使用的限制
2.1限制容器可以使用的最大内存
-m(--memory=):用于限制容器可以使用的最大内存
docker run -itd --name c4 -m 512m centos:7 /bin/bash
docker stats
2.2 限制容器可用的swap 大小
限制可用的swap 大小,--memory-swap
强调一下, --memory-swap是必须要与 --memory(或-m)一起使用的。
正常情况下, --memory-swap 的值包含容器可用内存和可用swap 。
所以 -m 300m --memory-swap=1g 的含义为:容器可以使用300M 的物理内存,并且可以使用700M (1G - 300M)的swap。
如果 --memory-swap 的值设置为0或者不设置,则容器可以使用的 swap 大小为 -m 值的两倍。
如果 --memory-swap 的值和 -m 值相同,则容器不能使用swap。
如果 --memory-swap 值为 -1,它表示容器程序使用的内存受限,而可以使用的swap空间使用不受限制(宿主机有多少swap 容器就可以使用多少)。
3、对磁盘IO的配置控制(blkio)的限制
--device-read-bps:限制某个设备上的读速度bps ( 数据量),单位可以是kb、mb (M)或者gb。
例: docker run -itd --name test9 --device-read-bps /dev/sda:1M centos:7 /bin/bash
#表示该容器每秒只能读取1M的数据量
--device-write-bps : 限制某个设备上的写速度bps ( 数据量),单位可以是kb、mb (M)或者gb。
例: docker run -itd --name test10 --device-write-bps /dev/sda:1mb centos:7 /bin/bash
#表示该容器每秒只能写入1M的数据量
--device-read-iops :限制读某个设备的iops (次数)
--device-write-iops :限制写入某个设备的iops ( 次数)
3.1 创建容器,不限制写速度
#创建容器tt01,不限制写入速度
docker run -it --name t1 centos:7 /bin/bash
#通过dd来验证写速度,拷贝50M的数据
dd if=/dev/zero of=/opt/test.out bs=10M count=5 oflag=direct #添加oflag参数以规避掉文件系统cache
3.2 创建容器,并限制写速度
#创建容器,并限制写入速度为1MB/s,即每秒只能写入1MB的数据量。
docker run -it --name t2 --device-write-bps /dev/sda:1mb centos:7 bash
#通过dd来验证写速度,拷贝50M的数据到容器中
dd if=/dev/zero of=/opt/test.out bs=10M count=5 oflag=direct #添加oflag参数以规避掉文件系统cache
4、清除docker占用的磁盘空间
docker system prune -a 可用于清理磁盘,删除关闭的容器、无用的数据卷和网络。
示例:
#查看容器
docker ps -a
#清理磁盘,删除关闭的容器、无用的数据卷和网络。
docker system prune -a
#再次查看容器,只剩下启动中的容器
docker ps -a
留下运行中的容器
总结
1.对cpu的限制参数
docker run -cpu-period #设置调度周期时间1000~1000000
-cpu-quota #设置容器进程的CPU占用时间,要与调度周期时间成比例
--cpu-shares #设置多个容器之间的CPU资源占用比
--cpuset-cpus #绑核(第一个CPU编号从0开始)
2.对内存的限制
-m 物理内存 [--memory-swap=总值]
3.对磁盘IO的限制
--device-read-bps 设备文件:1mb/1M #限制读速度
--device-write-bps 设备文件:1mb/1M #限制写速度
--device-read-iops #限制读次数
--device-write-iops #限制写次数
docker system prune -a #释放无用的资源