使用CGROUP限制mongd的disk io

最新推荐文章于 2023-08-21 19:16:16 发布
最新推荐文章于 2023-08-21 19:16:16 发布
阅读量1.6k 收藏
点赞数
文章标签： mongodb cgroup
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u014373825/article/details/22406019
版权

使用cgroup做磁盘IO的资源隔离，用到blkio子系统

先测试blkio限制dd的情况，很重要的一点是只能限制direct io, dd if=/dev/zero of=/mongodb/dd1 bs=4K count=10240 oflag=direct

在测试mongod的时候，直接限制mongod的进程不起作用，猜测可能是mongod是先往内存里写，不是direct io，后来直接限制启动mongod所在的shell 进程，成功


mkdir /cgroup/blkio

mount -t cgroup -o blkio mongoblk /cgroup/blkio

mkdir /cgroup/blkio/groupA

echo $$ > /cgroup/blkio/groupA/tasks

echo "104:16 2097152" > /cgroup/blkio/groupA/blkio.throttle.write_bps_device   (2MB/s)

mongod的数据插入基本1000每秒左右

echo "104:16 4194304" > /cgroup/blkio/groupA/blkio.throttle.write_bps_device   (4MB/s)

mongod的数据插入基本2000每秒左右

正常情况下3000-4000每秒左右

山水之间的雪人
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
CentOS8配置k8s daemon.json报错
hello world
05-07 2069
问题复现 配置k8s的过程种，需要对docker进行换源，同时需要修改k8s的驱动方式，参考了其他博客，于是： mkdir /etc/docker/ vim /etc/docker/daemon.json 在daemon.json写入： { "registry-mirrors" : ["https://mirror.aliyuncs.com"] "exec-opts":["native.cgroupdriver=systemd"] } 但是运行 systemctl res
Linux源码编译开启cgroup blk限制io性能
GetnextWindow的专栏
07-01 567
经过上面的mout之后就可以看到/sys/fs/cgroup/blkio中出现了各种控制节点。
[原] Cgroup CPU, Blkio 测试
weixin_33831196的博客
09-15 172
目录 关于Cgroup的简单测试 简单介绍Cgroup 测试及验证 总结 参考文献 关于Cgroup的简单测试 简单介绍Cgroup (如果对cgroup熟悉可以忽略) 一般情况下，cgroup挂载到一个虚拟文件目录，然后可以通过文件系统的API对其操作。 ># mount | grep cgroup 可以查看mount point (debian) /sys/fs/cgroup/ ...
mysql磁盘读写速度,使用cgroup限制磁盘io读写速率
weixin_34746924的博客
03-18 683
在MySQL innobackupex全备期间，磁盘io基本被打满，设置过 --throttle效果不明显，--throttle=# This option specifies a number of I/O operations (pairsof read+write) per second. It accepts an integerargument. It is passe...
Docker资源控制 CPU 内存 磁盘IO
低温热源的博客
07-20 840
Docker 通过 Cgroup 来控制容器使用的资源配额，包括 CPU、内存、磁盘三大方面， 基本覆盖了常见的资源配额和使用量控制。cgroup 资源限制 控制容器进程对 CPU 内存 磁盘IO 的使用量Cgroup 是 ControlGroups 的缩写，是 Linux 内核提供的一种可以限制、记录、隔离进程组所使用的物理资源(如 CPU、内存、磁盘 IO 等等) 的机制，被 LXC、docker 等很多项目用于实现进程资源控制。
cgroup限制mongodb进程内存大小
09-10
`cgroup`(Control Groups) 是Linux内核的一个功能，用于限制、记录和隔离进程组使用的物理资源，如CPU、内存等。在本场景中，我们使用cgroup来限制MongoDB进程的内存大小，以防止其过度消耗系统资源。 首先，创建一...
通过cgroup来限制KVM虚拟机使用的cpu和内存性能调优实践
04-24
控制群组（control group）（在此指南中简写为 ...通过使用 cgroup，系统管理员在分配、排序、拒绝、管理和监控系统资源等方面，可以进行精细化控制。硬件资源可以在应用程序和用户间智能分配，从而增加整体效率。
Linux Cgroup 技术 与 智能手机系统 IO 优化
09-22
演示了 Docker 虚拟化的基础技术之一：Linux Cgroup 以及 该技术在智能手机 IO 优化方面的潜在应用。 2015/04/26 @ 泰晓沙龙 第二期
docker cgroup 资源监控的详解
09-30
主要介绍了docker cgroup 资源监控的详解的相关资料,希望通过本文能帮助到大家，让大家理解掌握这部分内容，需要的朋友可以参考下
【云原生】Docker Cgroups资源控制管理
最新发布
Utopia_dower的博客
08-21 1290
cgroups，是一个非常强大的linux内核工具，他不仅可以限制被namespace 隔离起来的资源，还可以 为资源设置权重、计算使用量、操控进程启停等等。所以cgroups (Control groups) 实现了对资源的配额和度量。docker run -cpu-period #设置调度周期时间1000~1000000-cpu-quota #设置容器进程的CPU占用时间，要与调度周期时间成比例--cpu-shares #设置多个容器之间的CPU资源占用比。
cgroups v2 ppt
10-21
从Linux 4.5内核开始cgroup v2接口已经被标记为官方发布,意味着不再使用devel标签并且可以作为新型cgroup2 fs类型来挂载。
Cgroup 资源配置方法
小杨博客 学习交流
10-24 2298
cgroups是一个非常强大的linux内核工具。他不仅可以现在被namespace隔离起来的资源，还可以为资源设置权重，计算使用量，控制进程启停等等，所以cgroups实现了对资源的配额和度量
Docker 资源限制 Cgroup
nnn717的博客
07-08 541
_cgroups，是一个非常强大的linux内核工具，他不仅可以限制被namespace隔离起来的资源,还可以为资源设置权重、计算使用量、操控进程启停等等。所以cgroups (Control groups) 实现了对资源的配额和度量。cgroups有四大功能:资源限制:可以对任务使用的资源总额进行限制；先级分配:通过分配的cpu时间片数量以及磁盘I0带宽大小，实际上相当于控制了任务运行优先级；资源统计:可以统计系统的资源使用量，如cpu时长， 内存用量等；任务控制: cgroup可以对任务执行挂起、恢复等
使用cgroup的blkio子系统自动限制磁盘
添经地翼的博客
03-02 4298
使用Cgroups的blkio子系统，可以限制磁盘的访问速度、iops等，详细方法可参看http://www.elmerzhang.com/2012/12/cgroups-learning-6-blkio-subsystem/ 。然而，使用这种方法有一个不足，就是只能通过限制某个进程在某个磁盘（或分区）的访问，而不能很通用的限制所有进程在该磁盘（或分区）上的访问。     由上文中的链接可以了解到
cgroup-blkio子系统分析
tanzhe2017的博客
07-11 6521
1      概述Cgroup中的blkio子系统的主要功能是实现对磁盘i/o带宽的可定制化控制。目前支持的控制策略只要有两种：BLKIO_POLICY_PROP和BLKIO_POLICY_THROTL，即基于权重方式和基于流量方式。权重方式依赖于内核原生的CFQ i/o调度算法，i/o调度算法本身是工作在i/o调度层的，因此在使用上有一定的局限性，即被控制的设备必须使用cfq调度算法；为了弥补这...
Cgroup blkio简介和测试（使用fio测试）
80后的梦想
10-22 1344
因需要对docker镜像内的进程对磁盘读写的速度进行限制，研究了下Cgroup blkio，并使用fio对其iops/bps限速进行测试。 Cgroup blkio简介 Linux Cgroup（Control Groups）是Linux内核提供的用于限制、记录、隔离进程组可以使用的资源（cpu、memory、IO等）的一种机制。 在/boot下面的对应config文件里查看Cgroup内核选项： CONFIG_BLK_CGROUP=y CONFIG_BLK_DEV_THROTTLING=y b
使用cgroup 限制进程的磁盘io
ylqmf的专栏
01-27 8599
cat /etc/cgconfig.conf  # #  Copyright IBM Corporation. 2007 # #  Authors:     Balbir Singh balbir@linux.vnet.ibm.com> #  This program is free software; you can redistribute it and/or modify it
Linux系统中cgroup功能介绍
henweimei的博客
08-05 1886
 1  Cgroups简介 1.1 What are cgroups ? Cgroups(控制组)是Linux内核的一个功能，用来限制、统计和分离一个进程组的资源(CPU、内存、磁盘输入输出等)。换句话说就是，如果一个进程加入了某一个控制组，该控制组对Linux的系统资源都有严格的限制，进程在使用这些资源时，不能超过其最大的限制数，例如：memory资源，如果加入控制组的进程使用的m
cgroup 简介
sinat_34467747的博客
12-19 2544
cgroup 的功能在于将一台计算机上的资源（CPU，memory，network）进行分片，来防止进程间不利的资源抢占。 术语cgroup：关联一组 task 和一组 subsystem 的配置参数。 一个 task 对应一个进程，cgroup 是资源分片的最小单位。 subsystem：资源管理器，一个 subsystem 对应一项资源的管理，如 cpu， cpuset，memroy 等。
debian 如何使用cgroup实现存储卷io限速
06-11
要在 Debian 上使用 cgroup 实现存储卷 IO 限速，你需要遵循以下步骤： 1. 确保你的 Linux 内核支持 cgroup： ```bash sudo lscgroup | grep blkio ``` 如果输出中包含 `blkio`，则说明你的内核支持 cgroup。 2....

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值