解决bug: RuntimeError: Address already in use，一个linux下pytorch多卡训练tcp端口占用的bug

于 2024-09-03 19:06:13 发布
阅读量155 收藏
点赞数
文章标签： bug linux pytorch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/beneficial/article/details/141869261
版权

时间：2024.9.3

1）bug：

    self._store = TCPStore(  # type: ignore[call-arg]
RuntimeError: Address already in use

2）原因分析

linux下pytorch多卡训练深度学习模型，训练中途暂停训练，但仍有进程占用某个端口。

3）解决方法

netstat -nltp

在这里插入图片描述

kill -9 pid
beneficial
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
（fast-reid）多GPU训练出现RuntimeError: Address already in use解决
聿默的博客
10-10 5202
https://github.com/JDAI-CV/fast-reid 0.环境 ubuntu16.04 cuda9.0 python3.6 torch==1.1.0 torchvision==0.3.0 Cython yacs tensorboard future termcolor sklearn tqdm opencv-python==4.1.0.25 matplotlib scikit-image faiss-gpu==1.6.3 tabulate gdown 1.多次使用多GPU出现错.
Pytorch RuntimeError: No CUDA GPUs are available解决方案
weixin_43178406的博客
04-07 8万+
本文主要介绍了使用Pytorch产生错误提示：RuntimeError: No CUDA GPUs are available的解决方案，希望能对使用Pytorch的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案 2.1 步骤一 2.2 步骤二 2.3 步骤三
RuntimeError: Address already in use pytorch分布式训练
athrunsunny的博客
02-23 1591
出现该错误原因是通信端口被占用。之后重新训练即可正常。
RuntimeError: Address already in use 端口号冲突，解决思路总结
专注于AI领域前沿技术学习与分享：目标检测、图像修复、超分重建、AI工程化
11-25 4192
原因是，端口已被其他程序占用，端口号冲突了。这里核心思想：通信端口被占用，解决方法是每次运行程序前指定端口，端口号可以任意写
Pytorch问题处理：Pytorch distributed RuntimeError: Address already in use
道纪书生的博客
11-09 4226
Pytorch报错如下： Pytorch distributed RuntimeError: Address already in use 原因： 模型多卡训练时端口被占用，换个端口就好了。 解决方案： 在运行命令前加上一个参数 --master_port 如： --master_port 29501 后面的参数 29501 可以设置成其他任意端口 注意： 这个参数要加载 XXX.py前面 例如： CUDA_VISIBLE_DEVICES=2,7 python3 -m torch
解决方案：RuntimeError: Address already in use、urllib.error.HTTPError、Resource punkt not found错误分析
白洞，白色的明天在等着我们
09-12 3659
问题一：RuntimeError: Address already in use 问题二：urllib.error.HTTPError: HTTP Error 403: Forbidden 问题三：Resource punkt not found.
runtime error:address already in use
sunshine1324的博客
12-08 1674
runtime error:address already in use
Pytorch distributed RuntimeError: Address already in use
Orientliu96的博客
03-01 2万+
Pytorch distributed RuntimeError: Address already in use 如果是使用pytorch distributed 单机多卡训练方式，出现该错误，非常好解决。 Traceback (most recent call last): File "main1.py", line 279, in <module> train(args...
RuntimeError: Address already in use
Answer3664的博客
10-26 7738
Pytorch用多张GPU训练时，会报地址已被占用的错误。其实是端口号冲突了。 因此解决方法要么kill原来的进程，要么修改端口号。 在代码里重新配置 torch.distributed.init_process_group() dist_init_method = 'tcp://{master_ip}:{master_port}'.format(master_ip='127.0.0.1', master_port='10000') dist_world_..
torch进行多GPU卡训练时，报错RuntimeError: Address already in use
morein2008的专栏
10-14 1787
torch进行GPU卡训练时，报错RuntimeError: Address already in use参考：https://www.it610.com/article/1279180977062559744.htm问题在于，TCP的端口被占用，一种解决方法是，运行程序的同时指定端口，端口号随意给出：--master_port 29501例如：nohup python3 -m torch.di...
RuntimeError: Internal: [MASK] is already defined解决方案
weixin_43178406的博客
04-26 7万+
本文主要介绍了RuntimeError: Internal: [MASK] is already defined解决方案，希望能对使用ChatGLM的同学有所帮助。 文章目录 1. 问题描述 2. 解决方案
RuntimeError: expected scalar type Half but found Float解决方案
热门推荐
weixin_43178406的博客
04-28 9万+
本文主要介绍了RuntimeError: expected scalar type Half but found Float解决方案，希望能对同学们有所帮助。 文章目录 1. 问题描述 2. 训练的解决方案 3. 预测的解决方案
RuntimeError: CUDA error: invalid device ordinal解决方案
weixin_43178406的博客
01-09 3万+
本文主要介绍了RuntimeError: CUDA error: invalid device ordinal解决方案，希望能对使用Python的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案 2.1 LLM解决方案 2.2 cv2库解决方案
codesys进行控制虚拟轴运动时出现的一些奇怪bug的解释
最新发布
EstrangedZ的博客
09-03 586
使用codesys进行单虚拟轴控制时，出现一些bug——新建工程没有SoftMotion General Axis Pool，并且也无法添加，然后虚拟轴旋转的代码仅能运行在MainTask下面的问题
git进阶·团队开发的时候为何要创建临时分支来修复bug
qq_17355709的博客
09-02 309
在近些年来，团队工作的经验中，我总结出来的是，最好是先创建一个临时分支来修复bug，修复好后，再合并到主分支或目标分支。这样子在多个bug，或者多个功能一起进行开发的时候，可以分别修复，不会影响到主分支或目标分支的上的以及其他临时修复bug分支上的代码。
前端bug：v-show嵌套组件外层，页面扩大后，组件被遮挡
qq_43665890的博客
09-03 141
页面扩大到125%后，页码栏被压缩到窗口底部，被遮挡了。把v-show放到每个内部组件上。在外层套上v-show。
PyQt6 / PySide 6 实现可拖拽的多标签页 web 浏览器【1】（有 Bug）
2402_84665876的博客
08-29 696
PyQt6 / PySide 6 实现可拖拽的多标签页 web 浏览器【1】（有 Bug）
记录 PyQt6 / PySide 6 自定义边框窗口的 Bug 及可能可行的解决方案：窗口抖动和添加 DWM 环绕阴影的大致原理
2402_84665876的博客
09-02 745
记录 PyQt6 / PySide 6 自定义边框窗口的 Bug 及可能可行的解决方案：窗口抖动和添加 DWM 环绕阴影的大致原理
「bug」nvitop ERROR: Failed to initialize curses
绿色羽毛
08-29 553
nvitop 作为一个优秀个 Nvidia显卡查询库，简单易用且显示信息十分丰富，相比 Nvidia-smi 更方便，简直是每个 开发人员必备的库，安装也十分方便，直接采用 即可，调用的时候也是直接在 Terminal 中输入 即可，按 Q 键即可退出 nvitopnvitop 虽好用，但难免出问题，在此记录下 ERROR: Failed to initialize (setupterm: could not find terminfo database) 的解决方法： 这个错误表明 curses
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值