最近在远程服务器上运行分布式代码,在主函数里用os设置好了相关变量:
第一个用命令行运行,是成功的。但是中途退出后,第二次运行,就会报错
它会显示address already in use:
也就是说端口被占用了,需要换一个端口。于是,我新建了一个python文件,用来查找当前可用的端口,代码如下:
import socket
def find_free_port():
with socket.socket(socket.AF_INET, socket.SOCK_STREAM) as s:
s.bind(('', 0))
return s.getsockname()[1]
free_port = find_free_port()
print(f"Found free port: {free_port}")
在命令行运行这个文件,就会输出可用的端口号:
然后将这里:
os.environ[‘RANK’] = ‘0’
os.environ[‘WORLD_SIZE’] = ‘1’
os.environ[‘MASTER_ADDR’] = ‘127.0.0.1’
os.environ[‘MASTER_PORT’] = ‘43673’
里面的MASTER_PORT改一下,改成刚刚找到的可用端口即可。
未解决的问题:
感觉可能是我第一次运行的时候,没有正确地关闭进程,导致后续端口不能再次使用。目前由于时间问题,只能重新设置一个端口了。更进一步,应该弄清楚为什么程序用ctrl+c中断后,端口没有被释放。