auditd和kswapd0导致kylin环境内存CPU占用过高

auditd和kswapd0导致kylin环境内存CPU占用过高

环境信息:

cat /etc/kylin-release 
Kylin Linux Advanced Server release V10 (Tercel)

cat /etc/os-release
NAME="Kylin Linux Advanced Server"
VERSION="V10 (Tercel)"
ID="kylin"
VERSION_ID="V10"
PRETTY_NAME="Kylin Linux Advanced Server V10 (Tercel)"
ANSI_COLOR="0;31"

cat /etc/.productinfo
Kylin Linux Advanced Server
release V10 (SP1) /(Tercel)-aarch64-Build20/20210518

探查发现环境内kswapd0几乎吃满了所有cpu资源,导致执行shell命令都变慢

top
top - 13:08:34 up 97 days, 16:39,  2 users,  load average: 66.60, 65.91, 79.80
Tasks: 324 total,   1 running, 323 sleeping,   0 stopped,   0 zombie
%Cpu(s):  0.3 us, 11.7 sy,  0.0 ni,  0.4 id, 86.9 wa,  0.3 hi,  0.4 si,  0.0 st
MiB Mem :  31354.6 total,   1849.8 free,  27422.8 used,   2082.0 buff/cache
MiB Swap:      0.0 total,      0.0 free,      0.0 used.      0.0 avail Mem 

    PID USER      PR  NI    VIRT    RES    SHR S  %CPU  %MEM     TIME+ COMMAND                                                                                                                                
     68 root      20   0       0      0      0 S 100.0   0.0   3113:12 kswapd0                                                                                                                                
1092324 etcd      20   0   10.8g  91968      0 S   2.0   0.3   0:04.62 etcd                                                                                                                                   
1012554 root      20   0  751808  21824      0 D   0.9   0.1  23:43.11 kube-scheduler                                                                                                                         
1032523 root      20   0 2659520  69760      0 S   0.9   0.2   8:46.04 kubelet                                                                                                                                
1084081 root      20   0 2456704 103040      0 D   0.9   0.3   0:26.40 linux_client                                                                                                                           
1085770 root      20   0  814592  21632      0 S   0.9   0.1   0:11.68 kube-controller                                                                                                                        
1094746 root      20   0  744448   2496    384 D   0.9   0.0   0:00.03 kubectl      

通过网上查阅发现,当环境内存不足时,kswapd0会频繁进行换页操作,此操作会导致kswapd0占用过多cpu资源
Linux的进程kswapd0占用CPU过高导致卡顿问题

此时通过top命令和shift+M查到了占用内存资源最多的auditd进程

auditd部分版本可能存在内存泄漏的问题,导致占用过多资源
银河麒麟V10 SP2 auditd服务内存泄露问题

尝试重启auditd进程

systemctl restart auditd

重启后,环境内存和cpu恢复正常。

### 如何减少或优化Linux系统中auditd服务的内存使用 #### 了解审计子系统的特性 `auditd` 是 Linux 审计框架的一部分,用于记录安全相关事件。该守护进程会持续跟踪文件访问其他敏感操作,这可能导致大量日志数据被写入磁盘并占用一定量的RAM缓存。 为了有效降低 `auditd` 的内存消耗: #### 配置合理的缓冲区大小 通过调整 `/etc/audisp/plugins.d/syslog.conf` 文件中的参数,可以控制发送给syslog的消息队列长度以及每条消息的最大字节数。适当减小这些数值有助于减轻内核空间的压力[^1]。 ```bash # 编辑配置文件 sudo vi /etc/audisp/plugins.d/syslog.conf ``` #### 设置合适的过滤规则 定义精确的日志收集策略非常重要。只监听必要的事件类型能够显著减少不必要的开销。可以在 `/etc/audit/rules.d/audit.rules` 中添加自定义规则来限定关注范围内的活动监视[^2]。 ```bash # 添加新规则至 audit.rules echo "-S execve" | sudo tee -a /etc/audit/rules.d/audit.rules ``` #### 启用压缩存储机制 启用内置的数据压缩功能可节省磁盘I/O带宽从而间接释放部分物理内存。编辑 `/etc/audit/auditd.conf` 来激活此选项,并指定压缩算法如gzip等[^3]。 ```bash # 修改 auditd.conf 开启日志压缩 sudo sed -i 's/^.*space_left_action.*$/space_left_action = SYSLOG/' /etc/audit/auditd.conf sudo systemctl restart auditd.service ``` #### 实施轮转策略 定期清理旧的历史记录同样有利于保持较低水平的工作集尺寸。利用 logrotate 工具自动处理过期档案,确保不会因为长期积累而影响性能表现[^4]。 ```bash # 创建或更新 logrotate 规则 cat <<EOL | sudo tee /etc/logrotate.d/auditd /var/log/audit/*.log { daily rotate 7 compress missingok notifempty } EOL ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值