恒源云(GPUSHARE)_训练指引

已于 2022-02-23 15:31:42 修改
阅读量2.7k 收藏 39
点赞数 9
分类专栏： GPU云 文章标签： 深度学习 人工智能
于 2021-10-26 16:57:23 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39881439/article/details/120975257
版权
本教程指导如何在恒源云平台上进行深度学习训练。包括将本地数据上传到个人数据、从个人数据下载到实例、在实例中执行训练并自动上传结果后关机的详细步骤。
摘要由CSDN通过智能技术生成

该指引分为三个步骤。

  • 从本地上传压缩包到平台个人数据
  • 把平台个人数据下载到实例内
  • 进行训练与自动上传结果并关机

操作流程大概如下：

本地上传个人数据 

在本地首先将训练的数据打成 zip、tar.gz 常用格式的压缩包。然后本地下载并安装 oss 命令行工具，使用该工具将压缩包上传到平台的个人数据中。 

在这里使用 Windows 系统作为本地环境。如果是其他系统可以参考 oss 命令行工具 进行安装。

下载 OSS

最低0.47元/天 解锁文章
恒源云
关注
  • 9
    点赞
  • 踩
  • 39
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
YOLOv8模型云端训练：恒源云GPU服务器助力高效训练
走向CTO的路上...
07-03 781
YOLOv8是近年来流行的目标检测算法之一，具有速度快、精度高的特点。但训练YOLOv8模型需要大量的计算资源，尤其是GPU。恒源云是一家领先的云计算服务商，提供高性能的GPU服务器，可以帮助用户高效训练YOLOv8模型。利用恒源云GPU服务器训练YOLOv8模型，可以显著提升模型训练效率，并降低训练成本。恒源云提供的GPU服务器性能稳定可靠，可弹性扩展，可以满足不同用户的需求。
恒源云(GPUSHARE)_深度学习训练 | VSCode远程连接云GPU服务器教程
weixin_39881439的博客
04-22 2435
文章来源 | 恒源云社区（专注人工智能/深度学习云GPU服务器训练平台，官方体验网址：https://gpushare.com/） 原文地址 |https://gpushare.com/docs/best_practices/vscode/ VSCode是微软开发的一款跨平台代码编辑器，免费、开源并且支持扩展插件。使用 Remote 插件可以连接到远程服务器上进行开发。 安装扩展 侧边栏点击扩展标签，搜索 Remote - SSH 插件点击安装。如果需要使用中文界面，再安装 Chinese ...
如何将恒源云训练好的文件下载
最新发布
p749452的博客
07-11 282
在命令行输入 zip -r train16.zip ./* （这里的train16是我的文件名，因此也压缩文件也命名为train16），注意：前面进入的文件一定要写准确，否则会把你这个文件中的所有文件都压缩的，别问我为什么知道，问就是因为我错过。因为我的训练好的文件地址是 hy-tmp/ultralytics-main/runs/detect/train16。晚上训练模型，第二天看着训练好的模型却不知道如何下载，因此写一篇记录自己如何下载训练好的文件，供学习与参考。以下也是我参考的（叠甲）
恒源云平台oss上传与下载数据之用cmd
qq_47220888的博客
07-05 181
1.打开oss.exe，输入以下命令，之后输入用户名和密码。4.下载自己的数据集到/hy-tmp/目录下。3.将自己的数据集上传至平台中的文件夹下。2.在个人数据中创建文件夹。查看自己上传的数据集。
上传自己项目到恒源云训练（小白式教程）
m0_60985598的博客
06-02 1596
9.oss cp oss://cbam/cbam+yolo.zip /hy-tmp/ 下载压缩文件到/hy-tmp目录下。这里地区自己选，显卡类型根据自己的情况定，对于实例镜像，如下图选择自己的，这里我选择pytorch1.10.0框架，cuda是11.3，python版本为3.8。8.oss ls -s -d oss://cbam/ 查看之前上传到云端cbam文件夹的.zip文件。将下载好的oss.exe拖入到自己准备的目录，这里呢我拖入的是D盘下。此时也需要将待上传文件拖入到oss一同目录。
恒源云(Gpushare)_新功能上线，你确定不进来看看？
weixin_39881439的博客
04-08 386
文章来源 | 恒源云社区 原文地址 | 【功能更新】 实例监控可视化！ 大家在云端训练过程中，时常需要关注gpu、cpu以及硬盘的使用状态，以便确认硬件是否充分发挥了最佳效果，也能为训练代码的调整提供一些参考。 按照传统方法，大家一般会使用命令进行查看，比如大家熟悉的nvidia-smi、py3smi等，但对于新手来说，这种方式可能不太友好，而对于老手来说，也不方便动态呈现。 对此，【恒源云Gpushare】特上线了【实例监控】的功能，意味着，鼠标轻轻一点，大家即可通过线上页面，迅速了解gpu、cpu以及
恒源云(GPUSHARE)_GPU服务器租用 | Spyder连接使用教程
weixin_53977063的博客
04-23 1401
文章来源 | 恒源云社区（专注人工智能/深度学习云GPU服务器训练平台，官方体验网址：https://gpushare.com/） 原文地址 |https://gpushare.com/docs/best_practices/spyder/ Spyder是一款免费、开源的跨平台 Python 语言开发环境，提供高级的代码编辑、交互测试、调试等特性。使用其远程连接功能使用远程 Python 解析器。 创建好实例后打开该实例的JuypterLab，新建一个终端。也可以通过 SSH 客户端工具连接到实...
%E6%81%92%E6%BA%90%E4%BA%91%28Gpushare%29_VSA%EF%BC%9A%E4%B8%80%E4%B8%AA.html
04-22
%E6%81%92%E6%BA%90%E4%BA%91%28Gpushare%29_VSA%EF%BC%9A%E4%B8%80%E4%B8%AA.html
pod-gpushare-metrics-exporter：分叉形式
02-25
kubelet设备资源 { " name " : " pod1 " , " namespace " : " default " , " containers " : [ { " name " : " pod1-ctr " , " devices " : [ { ... " device_ids " : [ " 0000:86:00.3 " ...
small_dataset.zip.mp4
04-14
.mp4后缀去掉改为zip文件才能打开 ...环境是pytorch1.8 gpu，可以在云上直接运行， small_dataset.zip.mp4， 后缀.mp4去掉变为small_dataset.zip。压缩包里有图片数据集，源码和标注需要另外下载。云注册地址 ...
fire_smoke_labels.zip.mp4
04-14
环境是pytorch1.8 gpu，可以在云上直接运行，fire_smoke_labels.zip.mp4 把.mp4后缀去掉，改为fire_smoke_labels.zip，数据集图片和源码需要另外下载。云注册地址 https://gpushare.com/auth/register?user=18*****...
tf13_fall_detection2.zip
03-14
​安装环境，提供在免费云gpu上注册及其配置教程，tensorflow13.1 Python3.6 cuda10 里面的word文档有详细介绍。 源码是基于平地的人体姿态的跌倒检测，测试效果视频 由于https://live.csdn.net/v/146229 免费云注册...
租用GPU进行深度学习（神经网络）的模型训练
m0_74137224的博客
12-17 1070
其中Featurize，我在训练YOLOV7.0的时候，还是很顺利的，稍微修改下.yaml文件还有train.py轻松开训练。其次，路径问题，路径不能设置绝对路径，还有竟然会出现不能下载YOLO字体而报错，只能自己先下载好，然后在放进去。因为用cpu训练非常的慢，然后配置GPU的环境，配置cuda和cudann，加上一些版本，驱动，兼容等问题，需要花很长时间。理由在于数据集的上传速度够快，11个G的数据集不会超过30min，2个G的数据不会超过1min。
恒源云GPU云服务操作总结
weixin_51197745的博客
05-22 3976
前言 最近忙于实验论文，奈何实验室硬件资源不够，只能混迹于各家的GPU云服务器平台，经过近一段时间以来的摸索，同时根据自己在各家平台的使用体验，向大家分享一下一下恒源云GPU云服务器的的操作总结，方便大家参考。 如下是使用教程： 下面结合我的使用体验进行详细介绍。 一、配置实例 1、首先进入官网： 恒源云_GPUSHARE-恒源智享云 点击云市场我们可以看到当前提供的的各种显卡类型，可以看到显卡类型包括了NVIDIA的 RTX系列、Tesla系列、GTX系列，还是十分丰富的，而且也提供了低中高三种价位供选
恒源云之oss上传数据、云台下载数据
weixin_44342777的博客
11-12 1175
如何使用恒源云来跑深度学习程序、以及解决数据集太大，无法解压；
恒源云使用
知识搬运者
05-02 2393
做成 zip 压缩包，再将此文件上传到了个人数据中。执行成功后执行关机操作。脚本运行即可，首次使用时建议先进行测试一下。（或者vim upload.sh创建脚本。进入插入模式，粘贴下来整个脚本内容，再按。目录下使用 vim 创建一个。）注意：第一行必须是。在训练的任务代码中的最后调用此。是服务器的系统储存空间。免费硬盘储存空间是在。
恒源云GPU服务器使用笔记
m0_48838378的博客
03-12 7439
【自用记录向】恒源云GPU服务器使用笔记，用以训练yolov5模型
云GPU（恒源云【不推荐】）训练的具体操作流程
热门推荐
weixin_43764678的博客
07-28 1万+
主要介绍一下如何使用云服务器平台训练网络，包括pycharm配置、数据传输、服务器如何使用等
恒源云的上传下载以及迁移数据
m0_57346422的博客
03-12 797
建议使用oss传输数据，账号和密码是恒源云的登陆账号密码。
electra huggingface
08-21
ELECTRA是一种基于生成对抗网络（GAN）的预训练模型，用于语言建模和自然语言处理任务。在使用ELECTRA进行预训练和微调时，可以使用Hugging Face提供的库来实现。引用提供了一个使用fastai和huggingface库来预训练和微调ELECTRA模型的GitHub项目示例。此项目复制了相关论文的结果。引用显示了两个Hugging Face的GitHub项目，其中一个是使用ELECTRA的小型分类器模型，另一个是使用ELECTRA的小型Roformer模型。引用提供了一个后台运行预训练程序的示例命令，包括切换路径、后台运行程序以及查看训练日志的命令。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [恒源云(GPUSHARE)_3090跑NLP预训练模型ELECTRA实录](https://blog.csdn.net/weixin_53977063/article/details/117964257)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值