解决paddle框架多卡失败的问题

报的错是双卡通讯失败,让检查nccl,但考虑到是docker的环境,可能和nccl没太大关系(因为不用docker可以正常跑)。

最后解决方法是参考issue中的
https://github.com/NVIDIA/nccl/issues/342#issuecomment-647049246
https://stackoverflow.com/questions/30210362/how-to-increase-the-size-of-the-dev-shm-in-docker-container

加入–shm-size=256m 在-it命令后,位置比较重要。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
基于paddle框架的图像超分和降噪实现源码+项目使用说明.zip 基于paddle框架的图像超分和降噪实现源码+项目使用说明.zip 基于paddle框架的图像超分和降噪实现源码+项目使用说明.zip 【资源说明】 该项目是个人毕设项目源码,评审分达到95分,调试运行正常,确保可以运行!放心下载使用。 该项目资源主要针对计算机、自动化等相关专业的学生或从业者下载使用,也可作为期末课程设计、课程大作业、毕业设计等。 具有较高的学习借鉴价值!基础能力强的可以在此基础上修改调整,以实现类似其他功能。 项目建议安装anaconda,在anaconda中配置环境,然后导入到pycharm中运行 ## 1. 模型 * [x] [Unet]() ## 2. 数据准备 ## 3. 训练 此模型支持单机单卡和单机多卡训练,以下使用`UNet`跑`denoise`举例。 ### 3.1 单机单卡 ``` python tools/train.py -c ./configs/denoise/unet_watermark.yaml ``` ### 3.2 单机多卡 ``` python -m paddle.distributed.launch --gpus=0,1,2,3 tools/train.py -c ./configs/denoise/unet_watermark.yaml ``` 所有的训练日志都默认保存在 `./output/UNet/train.log` ## 4. 实验结果 ## 5. 评估 此模型支持单机单卡和单机多卡评估,以下使用`UNet`跑`denoise`举例,生成的模型位置在`/output/UNet/best_model.pdparams` ### 5.1 单机单卡 ``` python tools/eval.py -c ./configs/denoise/unet_watermark.yaml -o Global.pretrained_model=./output/UNet/best_model.pdparams ``` ### 5.2 单机多卡 ``` python -m paddle.distributed.launch --gpus=0,1,2,3 tools/eval.py -c ./configs/denoise/unet_watermark_4gpu.yaml -o Global.pretrained_model=./output/UNet/best_model.pdparams ``` 所有的评估日志都默认保存在 `./output/UNet/eval.log` ## 6. 推理 ### 6.1 模型导出 首先需要导出推理模型,例如训练好的模型参数在`./output/UNet/best_model.pdparams`,命令为 ``` python tools/export_model.py -c ./configs/denoise/unet_watermark.yaml -o Global.pretrained_model=./output/UNet/best_model.pdparams ``` 模型将自动导出到`Global.output_dir/Arch.name/inference`,其中`Global.output_dir`和`Arch.name`均在配置文件`.yaml`中。 ### 6.2 模型推理 模型导出后将使用测试数据集对模型进行推理,例如所有的测试文件都在`./test_data`中,运行命令 ``` python tools/inference.py -c ./configs/denoise/unet_watermark.yaml -o Data.Test.path=./test_data ``` 模型会将推理的结果放入`Global.output_dir/Arch.name/Img`中。
提供的源码资源涵盖了安卓应用、小程序、Python应用和Java应用等多个领域,每个领域都包含了丰富的实例和项目。这些源码都是基于各自平台的最新技术和标准编写,确保了在对应环境下能够无缝运行。同时,源码中配备了详细的注释和文档,帮助用户快速理解代码结构和实现逻辑。 适用人群: 这些源码资源特别适合大学生群体。无论你是计算机相关专业的学生,还是对其他领域编程感兴趣的学生,这些资源都能为你提供宝贵的学习和实践机会。通过学习和运行这些源码,你可以掌握各平台开发的基础知识,提升编程能力和项目实战经验。 使用场景及目标: 在学习阶段,你可以利用这些源码资源进行课程实践、课外项目或毕业设计。通过分析和运行源码,你将深入了解各平台开发的技术细节和最佳实践,逐步培养起自己的项目开发和问题解决能力。此外,在求职或创业过程中,具备跨平台开发能力的大学生将更具竞争力。 其他说明: 为了确保源码资源的可运行性和易用性,特别注意了以下几点:首先,每份源码都提供了详细的运行环境和依赖说明,确保用户能够轻松搭建起开发环境;其次,源码中的注释和文档都非常完善,方便用户快速上手和理解代码;最后,我会定期更新这些源码资源,以适应各平台技术的最新发展和市场需求。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

·空感自诩”

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值