canfu5473的博客

转载 rsync 增量传输大文件优化

背景rsync用来同步数据非常的好用，特别是增量同步。但是有一种情况如果不增加特定的参数就不是很好用了。比如，我公司数据同步场景：每月月初都进行同步几个100多G的压缩包数据，因限速设置，会连续好几天用来同步数据，但当同步到近100G的时候，再次启用rsync同步时，会出现以下两种问题：1）但是发现等了好久都没有进行数据传输，倒是机器的IO一直居高不下。2）长时间未进行数据传输，不知因网络问题，还...