cgroup限制oracle,使用cgroup和tc限制带宽

cgroup子系统net_cls 可以给 packet 打上 classid 的标签，用于过滤分类，这个classid就是用于标记skb所属的 qdisc class 的。有了这个标签，流量控制器(tc)可以对不同的 cgroup 的 packet 起作用，Netfilter(iptables)也可以基于这个标签有对应的动作。创建一个 net_cls cgroup 对应的是创建一个 net_cls.classid 文件，这个文件初始化为 0。可以写 16 进制的 0xAAAABBBB 到这个文件里面，AAAA 是 major 号，BBBB 是 minor 号。读这个文件返回的是十进制的数字。

如下，创建两个cgroup组，每个组分配不同的handle号，指定不同的带宽。

root@ubuntu:/sys/fs/cgroup/net_cls# mkdirclient

root@ubuntu:/sys/fs/cgroup/net_cls# cd client/root@ubuntu:/sys/fs/cgroup/net_cls/client# l

cgroup.clone_children cgroup.procs net_cls.classid net_prio.ifpriomap net_prio.prioidx notify_on_release tasks

root@ubuntu:/sys/fs/cgroup/net_cls/client# echo 0x10010 >net_cls.classid

root@ubuntu:/sys/fs/cgroup/net_cls/client# catnet_cls.classid 65552

root@ubuntu:/sys/fs/cgroup/net_cls# mkdirserver

root@ubuntu:/sys/fs/cgroup/net_cls# cd server/root@ubuntu:/sys/fs/cgroup/net_cls/server# l

cgroup.clone_children cgroup.procs net_cls.classid net_prio.ifpriomap net_prio.prioidx notify_on_release tasks

root@ubuntu:/sys/fs/cgroup/net_cls/server# echo 0x10020 >net_cls.classid

root@ubuntu:/sys/fs/cgroup/net_cls/server# catnet_cls.classid65568

接下来配置tc，写入到cgroup的net_cls.classid中的handle号，要与tc配置中的classid号相同

tc qdisc add dev ens8 root handle 1:0 htb default 1tc class add dev ens8 parent1:0 classid 1:1htb rate 10000Mbit

tc class add dev ens8 parent1:1 classid 1:10htb rate 100Mbit ceil 100Mbit

tc class add dev ens8 parent1:1 classid 1:20 htb rate 1000Mbit ceil 1000Mbit

设置过滤器：

tc filter add dev ens8 parent 1:1 protocol ip prio 10 handle 1:10cgroup

tc filter add dev ens8 parent1:1 protocol ip prio 10 handle 1:20 cgroup

接下来使用cgexec工具，来执行对应的程序，我们可以看到流量控制如我们的预期：

cgexec -g net_cls:server python test.py 129.9.123.89bandwidth95.9717340903 MB/s

cgexec-g net_cls:client python test.py 129.9.123.89bandwidth11.3290806068 MB/s

修改带宽命令如下：

tc class change dev ens8 parent 1:1 classid 1:40 htb rate 512Kbit ceil 512Kbit

原理分析待续