简介
开发zMemif的主要动机是go有很高的处理能力,但是内置的udp库的确有些寒酸, 纯c开发效率又有些低,虽然可以用nff-go来实现go和dpdk的融合,但是cgo编译的确有点烦人,而且这个项目似乎也死了。然后考虑到容器的场景和手上netDAM
及ruta
两个项目的需求,使用无锁内存队列来在go和dpdk之间共享是一个不错的选择。
思科开源了memif的库,但是需要和vpp配合使用,对于很多互联网企业VPP应用部署太麻烦,而且很多功能其实并不需要。同时netDAM也需要提供用户态的无锁内存队列功能,考虑到生态的兼容性,而且dpdk已经支持了memif的PMD,因此还是选择了memif的数据结构, go的库来自于vpp/gomemif库,并做了一些修改,原来的代码组织结构不太好,同时Interface的定义和go的interface会让人混淆,因此将Interface改为了port,同时发现在dpdk中已经把master/slave政治正确到server/client了,于是也就顺手改成了同样的名称保证一致。
系统架构
如下图所示,主要是在收发包路径上提供一条基于共享内存访问的路径memif来承载UDP业务并通过memif和DPDK绕开Kernel,为Golang提供原生的高性能包处理能力。而考虑到云端虚机等场景下除了业务的socket以外还需要一些管理的SSH或者以太网本身的ARP等二层协议的支持,于是在dpdk侧创建了memif和vhost_user两个接口。