Linux内核延迟写机制

Linux内核延迟写机制

最新项目开发的时候，发现在设备上写完文件的时候，突然掉电重启以后，数据会丢失，然后就研究了一下这个问题，是由于Linux内核延迟写机制导致了这样的情况发生。
1. 延迟写（delayed write）: 传统的UNIX实现在内核中设有缓冲区高速缓存或页面高速缓存，大多数磁盘I/O都通过缓冲进行。 当将数据写入文件时，内核通常先将该数据复制到其中一个缓冲区中，如果该缓冲区尚未写满，则 并不将其排入输出队列，而是等待其写满或者当内核需要重用该缓冲区以便存放其他磁盘块数据时， 再将该缓冲排入到输出队列，然后待其到达队首时，才进行实际的I/O操作。这种输出方式就被称为延迟写。
2. 延迟写减少了磁盘读写次数，但是却降低了文件内容的更新速度，使得欲写到文件中的数据在一段时间内并没有写到磁盘上。当系统发生故障时，这种延迟可能造成文件更新内容的丢失。为了保证磁盘上实际文件系统与缓冲区高速缓存中内容的一致性，UNIX系统提供了sync、fsync和fdatasync三个函数。
1)、sync函数
sync函数只是将所有修改过的块缓冲区排入写队列，然后就返回，它并不等待实际写磁盘操作结束。通常称为update的系统守护进程会周期性地（一般每隔30秒）调用sync函数。这就保证了定期冲洗内核的块缓冲区。命令sync(1)也调用sync函数。
2)、fsync函数
fsync函数只对由文件描述符filedes指定的单一文件起作用，并且等待写磁盘操作结束，然后返回。fsync可用于数据库这样的应用程序，这种应用程序需要确保将修改过的块立即写到磁盘上。
3)、fdatasync函数
fdatasync函数类似于fsync，但它只影响文件的数据部分。而除数据外，fsync还会同步更新文件的属性。
对于提供事务支持的数据库，在事务提交时，都要确保事务日志（包含该事务所有的修改操作以及一个提交记录）完全写到硬盘上，才认定事务提交成功并返回给应用层。

在我们的系统中，即busybox文件系统下，如果在写一个文件时，可以通过下面的命令进行同步，及时的把数据写入磁盘中：
# fsync
BusyBox v1.27.1 (2018-06-12 09:43:31 CST) multi-call binary.

Usage: fsync [-d] FILE…

Write files’ buffered blocks to disk

    -d      Avoid syncing metadata

# fsync file
如果使用#sync只是把修改过的缓冲块排入写队列当中，这时候掉电，同样会丢失数据，使用 # fsync file即可以及时写入磁盘，保护数据。

参考文章
【1】http://alinuxer.sinaapp.com/?p=147
【2】https://blog.csdn.net/younger_china/article/details/51127127