Android/Linux 磁盘写入缓存/等待时间 参数修改

Linux系统当进行文件写操作时，并不会将数据立马写入磁盘，而是写写到缓存，等待达到占用内存一定比例或超过一定时间才会批量将这些缓存数据写入磁盘，这样可以减少IO操作，提升性能和磁盘寿命。如果数据还没来得及写入磁盘发生硬件掉电，这些数据就会丢失。应用可以调用sync实时将内容写入磁盘避免丢失。排查丢失问题可以在断电前执行sync命令，看能不能复现，若无法复现，说明就是缓存没有及时写入磁盘导致。

我们可以调整系统一些参数来改善此问题，但需要均衡IO性能与数据安全。

1. /proc/sys/vm/dirty_ratio

这个参数控制文件系统的文件系统写缓冲区的大小，单位是百分比，表示系统内存的百分比，表示当写缓冲使用到系统内存多少的时候，开始向磁盘写出数据。增大之会使用更多系统内存用于磁盘写缓冲，也可以极大提高系统的写性能。但是，当你需要持续、恒定的写入场合时，应该降低其数值

 

2. /proc/sys/vm/dirty_background_ratio

这个参数控制文件系统的pdflush进程，在何时刷新磁盘。单位是百分比，表示系统内存的百分比，意思是当写缓冲使用到系统内存多少的时候，pdflush开始向磁盘写出数据。增大之会使用更多系统内存用于磁盘写缓冲，也可以极大提高系统的写性能。但是，当你需要持续、恒定的写入场合时，应该降低其数值

 

3. /proc/sys/vm/dirty_writeback_centisecs 

这个参数控制内核的脏数据刷新进程pdflush的运行间隔。单位是 1/100 秒。缺省数值是500，也就是 5 秒。如果你的系统是持续地写入动作，那么实际上还是降低这个数值比较好，这样可以把尖峰的写操作削平成多次写操作

 

4. /proc/sys/vm/dirty_expire_centisecs

这个参数声明Linux内核写缓冲区里面的数据多“旧”了之后，pdflush进程就开始考虑写到磁盘中去。单位是 1/100秒。缺省是 3000，也就是 30 秒的数据就算旧了，将会刷新磁盘。对于特别重载的写操作来说，这个值适当缩小也是好的，但也不能缩小太多，因为缩小太多也会导致IO提高太快
 

缓存数据存入磁盘的最长时间，如果这段时间写不完，就会报异常停止写，这样缓存数据会不断积累，导致内存爆掉。

echo 0 > /proc/sys/kernel/hung_task_timeout_secs

调低百分比，让缓存尽早的写入磁盘，这样缓存不会积累大量的数据，才开始写入磁盘

echo 5 > /proc/sys/vm/dirty_background_ratio

echo 10 > /proc/sys/vm/dirty_ratio

 

Android修改这些参数默认值：

system/core/rootdir/init.rc    

570     # Tweak background writeout
571     write /proc/sys/vm/dirty_expire_centisecs 200
572     write /proc/sys/vm/dirty_background_ratio  5

另一方面可以修改mount 挂载参数，使用sync同步模式，直接将文件写入磁盘，但会降低性能

参考：

linux 磁盘cache参数设置_b779789251的博客-CSDN博客 https://blog.csdn.net/b779789251/article/details/94559911

linux调整缓存写入磁盘的时间，减少磁盘爆掉的可能性 - 脚本小娃子 - 博客园 https://www.cnblogs.com/shengulong/p/9265145.html

深入解析Linux下的磁盘缓存机制与SSD的写入放大问题_LINUX_操作系统_脚本之家 https://www.jb51.net/LINUXjishu/405114.html

https://blog.csdn.net/chuanzhilong/article/details/76020517

【集群实战】NFS网络文件共享服务2-mount挂载（参数，优化）--async sync dirsync等参数讲解

https://www.cnblogs.com/zoe233/p/12018875.html