环境
NFS Server: CentOS 7.6
NFS Client: Aix 7.1
Oracle Version: 9.2.0.8
问题
(1)现象表现
Aix挂载CentOS 7.6 nfs之后,使用Oracle RMAN恢复到一定阶段,表现为cd进入NFS server端或NFS client端
ls查看或者df查看文件系统均会卡住不出结果,使用iotop查看nfs进程io读写均无读写,呈现hang住状态。
(2)操作系统日志
NFS Server操作系统日志:
/var/log/message
XFS: nfsd(13480) possible memory allocation deadlock size 65532 in kmem_realloc (mode:0x250)
原因
由于内存碎片过多,无法分配连续大块内存导致进程等待内存回收。
min_free_kbytes设置过小,CentOS默认设置60M
解决
调整为4G
(1)立即释放
echo 4194304 > /proc/sys/vm/min_free_kbytes
(2)永久设置
vi /etc/sysctl.conf
vm.min_free_kbytes = 4194304