网络编程的未来，io_uring？

前言

熟悉Linux网络或者存储编程的开发人员，对于libaio [1] (Linux-native asynchronous I/O) 应该并不太陌生。Libaio提供了一套不同于POSIX接口的异步I/O接口，其目的是更加高效的利用I/O设备。在最近几年的过程中，有很多Linux 开发人员试图去优化libaio相关的实现，但是收效甚微。于是Jens [2] 开发了一套新的异步编程接口io_uring [3] ，主要是为了替代libaio，目前主要应用在存储的场景中。相比使用libaio，在存储中使用io_uring，那么应用的性能有了显著的提升。比如说用FIO程序，采用不同的存储引擎libaio和io_uring测试同样的NVMe SSD（见[4]），io_uring的效果要好不少。为此也有一些文章宣称，在某些场景下使用io_uring + Kernel NVMe的驱动，效果甚至要比使用SPDK 用户态NVMe 驱动更好。当然在SPDK 项目中，用户也进行如下的对比，使用FIO + SPDK bdev 测试同样的NVMe 盘，可以采用以下的三种bdev进行性能比较: (1) 基于SPDK中用户态NVMe驱动的bdev; (2) 基于SPDK中libaio实现的bdev;(3) 基于SPDK中io_uring实现的bdev。然后可以自行比较一下哪种方式性能最好。

在这篇文章中，我们主要是把io_uring使用在网络中。为了使得大家更清晰的了解，我们将在本文中介绍如下内容:

1. SPDK socket API的现状

2. SPDK中怎么高效利用kernel TCP/IP 栈

3. io_uring目前存在的一些问题

4. 在SPDK 中怎么使能io_uring

SPDK socket API 现状

在SPDK的代码库，我们有一个socket API 位于(lib/sock)目录下，这个SPDK socket API主要用于封装各个不同的TCP/IP的socket实现，包括基于内核TCP/IP的socket， 以及用户态的socket实现。图1给出了目前代码中实现的一些情况, SPDK 20.04 版本以及主分支上有三种sock封装， POSIX(module/sock/posix), uring(module/sock/uring), vpp (module/sock/vpp) 。其中POSIX库主要是使用了POSIX的接口去操纵kernel的TCP/IP 栈，uring主要是采用io_uring的接口去使用kernel TCP/IP的栈，VPP 的socket主要是整合了VPP的用户态TCP/IP 栈。从图1中我们可以看到，目前我们主要推荐POSIX的实现。因为uring socket的实现需要环境的支持，比如对Linux kernel版本的要求。目前Linux kernel对于io_uring的支持还在开发过程中，所以在SPDK 中基于io_uring的socket实现，需要不断地完善和更新。但是不可否认，使用io_uring来高效地使用kernel TCP/IP 栈是未来的发展趋势。

对于SPDK中VPP的整合，目前的状况是在SPDK中的集成，将会在20.07停止，20.10中把VPP的sock实现从SPDK 中删除。其主要原因是基于VPP的sock实现并没有体现出相应的性能优势，具体的声明可以参考 [5] 。至于Seastar在