![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
IO
ljyss9
这个作者很懒,什么都没留下…
展开
-
异步化IO
背景: 随着存储计算分离的项目进一步推进,IO异步成为了一件必须要做的事情了。随着存储内容分发到远端集中存储(盘古集群),IO lateny平均也需要300-400us,更不用说对于长尾访问,网络抖动,IO集中的情况,有时IO Latency可达到1ms。IO异步化是我们改进延时的一种方式。实现过程: 总体采用的异步回调的方式,但是由于应用层,与底层...原创 2019-03-25 15:17:54 · 353 阅读 · 0 评论 -
文件系统的预读
最近在做迁移工作,从hdfs迁移到我司的分布式文件系统,但是我也是非常无语,我司文件系统竟然没有做预读。。对于大量顺序读的场景,这个是非常吃亏的。对于跨机房场景,原Hdfs可达到100M+/s的读速度,但是现在却仅有几十M/s。对于这个问题,等待底层文件系统添加预读确实是最根本的解决方法,但是面对发布时间周期长,排期封板等问题,我们就打算在自己的插件上先简单实现预读功能。 ...原创 2019-10-04 10:54:13 · 343 阅读 · 0 评论