云服务器实时下载

文港

于 2022-06-09 11:03:01 发布

阅读量343

点赞数

文章标签：服务器 ssh 运维

本文链接：https://blog.csdn.net/qq_43227353/article/details/125199215

版权

该博客介绍了如何在执行云服务器上的高性能计算任务时，通过rsync实现本地与服务器的数据增量同步。利用python的os模块，在for循环中调用rsync命令，每次循环都进行一次同步，确保在画图或处理图形界面任务时能即时获取最新数据。这种方法提高了数据下载速度，模拟了本地运行的效果。

摘要由CSDN通过智能技术生成

在云服务器上执行高性能计算的时候，如果需要画图或者其余图形化界面的任务，则需要将数据下载到本地。
在本地执行一个for循环，每执行一次就访问一次下载，实现与服务器的即时通讯，并下载。
考虑到ssh是全局同步，所以利用rsync，可是实现增量同步的功能，从而使得下载速度变快。如下：

import time
import os

# 获取当前路径
plot_dir = os.getcwd()
# 创建link路径
link_dir = plot_dir + '/link'
if not os.path.exists(link_dir):
    os.mkdir(link_dir)

for i in range(4):
    # 下载文件
    time1 = time.time()
    # 自动获取路径
    os.system('rsync -avz --delete --link-dest {} \
        ***@***:/share/home/***/results \
        {} '.format(link_dir, plot_dir))
    # 画图
    time2 = time.time()
    print('rsync 花费的时间: {}'.format(time2-time1))