零拷贝摘录

本文探讨了Kafka效率高的原因,主要归功于其采用的0拷贝技术。传统文件传输涉及4次数据拷贝和两次内核态切换,而0拷贝技术则优化了这一过程,只需在内核态完成传输,减少了一次拷贝和一次状态切换,从而显著提升了性能,实验显示时间可缩短65%。在Golang中,可以使用`syscall.Sendfile`函数实现0拷贝。
摘要由CSDN通过智能技术生成

在看kafka的时候看到kafka的高效的原因,是因为用了0拷贝技术.这里看了

https://developer.ibm.com/articles/j-zerocopy/这篇文章简单做一下笔记

在web场景中,我们需要将硬盘的数据传输到socket中做网络推送.我们编写的应用程序作为媒介,如果使用传统的文件拷贝技术的话将会出现4次拷贝,非常影响效率.

1、传统的数据拷贝方式,经历了4次拷贝
在这里插入图片描述
在上图中,application buffer存在是没有意义的.而且这几个过程需要经历两次内核态切换
在这里插入图片描述

数据不需要从内核态出来到用户态,只需要在内核态传输即可.这几次内核态的切换也没有存在的意义.

2、0拷贝技术对上述场景做了优化
在这里插入图片描述
这样的话,数据只需要在内核态中完成传输即可,涉及只有一次内核态切换
在这里插入图片描述

3、文章也给了性能比较

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-efU7C7yS-1649518386728)(/Users/jiangtai/Library/Application Support/typora-user-images/image-20220409232729336.png)]可见时间可缩短65%.

4、在golang中可以用下面函数发起系统调用使用0拷贝技术

_, werr := syscall.Sendfile(outfd, srcfd, currOffset, int(size))
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值