恒源云-深度学习GPU训练-使用JupyterLab训练完后上传训练结果

        利用恒源云的GPU进行深度学习训练时,可以通过VScode或Pycharm进行远程操作,方便调试。如果你的代码在epoch比较少的情况下能够在自己电脑训练并且没有错误,那么当你增大epoch后,你可以直接在JupyterLab终端运行你的代码(例如:python main.py --参数)。以下是在JupyterLab运行后将结果上传到本地文件夹的方法。

恒源云网站:恒源智享云

1、进入恒源云的文档中心

图1

 2、找到对应的训练指引(这个是看指引,可以直接跳过步骤2)

图2

 蓝色圈2上的“本地上传个人数据”、“实例下载个人数据”可以很好地指引你把你的代码包(可以包含代码和数据集)下载并解压到/hy-tmp文件中。(本文使用的是OSS将代码包上传到恒源云,OSS上传数据比较快,但是OSS下载代码包需要先将其压缩成压缩包(.zip或者.7z格式))

点击蓝圈2(执行训练并自动上传结果后关机)。

指引是通过脚本进行数据保存的,当然也可以不用完全按它的指引。只需要指引中的如下几步:

图3
图4

3、进入JupyterLab

图5

 点击Terminal,进入终端

图6

 4、按照图7的方式便可以将训练结果上传至个人数据目录oss://

图7

(1)如果没有在hy-tmp目录,需要切换至该目录(cd /hy-tmp

(2)通过oss login登录你的账号

oss login

 (3)通过zip -q -r  结果文件夹名字.zip /hy-tmp下的目录

zip -q -r result_1.zip samples

 该行代码是把/hy-tmp目录下的samples目录下的文件压缩成result_1.zip

(4)把压缩包上传至个人数据目录oss://backup/下

oss cp result_1.zip oss://backup/

 (5)查看是否上传成功

oss ls -s oss://

从图7可以看到上传成功 。以下是个人数据目录backup下的压缩包:

图8

 

5、把个人数据目录下的压缩包下载至本地目录

(1)先双击打开oss.exe

图9
图10

 (2)执行以下命令即可完成数据传输

图11

 如果是通过点击oss.exe上传数据,则命令行前面不需要加oss。

  • 6
    点赞
  • 26
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
恒源是一个平台,提供了便捷的环境和资源来进行机器学习任务的训练。而PyCharm是一个常用的Python集成开发环境(IDE),可以方便地进行代码编辑、调试和管理。 要在恒源使用PyCharm进行训练,首先需要在恒源平台上创建一个实例。在实例创建完成后,可以通过远程连接工具(如SecureCRT)连接至实例。 接下来,在实例中安装和配置PyCharm。可以通过命令行或者通过恒源控制台提供的“自定义镜像”功能,下载和安装PyCharm软件。 安装完PyCharm后,打开PyCharm界面,点击“Open”按钮选择保存训练代码的文件夹,或者创建一个新项目。 在PyCharm中,可以创建一个Python文件,编写训练代码。通过导入必要的机器学习相关库和数据预处理,来构建训练模型。可以使用PyCharm内置的调试工具来检查代码的运行状态,并对代码进行调试。 在配置好训练代码后,可以使用恒源平台提供的资源(如GPU、CPU)来运行代码进行训练。通过PyCharm的运行按钮(或快捷键),执行代码并进行训练训练过程中,可以通过PyCharm的控制台输出信息和图形界面,查看训练过程中的各项指标和图像,以及调试信息和错误提示。 训练完成后,可以保存训练模型,或者在恒源平台上下载模型和训练结果。 总结来说,使用恒源进行机器学习训练需要在恒源平台上创建实例,安装和配置PyCharm,在PyCharm中编写训练代码,通过PyCharm的调试工具调试代码,使用恒源的资源进行训练,最后保存训练模型和结果。这样就能很方便地在恒源使用PyCharm进行训练

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值