【无标题】

最新推荐文章于 2024-04-01 09:59:03 发布
最新推荐文章于 2024-04-01 09:59:03 发布
阅读量480 收藏 3
点赞数
文章标签： python chatgpt 语言模型 人工智能 深度学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_35772105/article/details/132913069
版权

深度学习GPU算力平台推荐

你正在为深度学习项目寻找可靠且负担得起的GPU计算平台吗?

在本文中，我们将提供GPU强大平台的建议，可以帮助您最大限度地利用深度学习工作负载。无论你是数据科学家、研究人员还是学生，这些平台都能提供稳定高效的GPU计算能力来加速你的项目。从AutoDL的优质GPU租赁平台到NVIDIA的DGX系统试用活动，我们整理了一份资源清单，帮助您根据自己的需求做出最佳选择。请继续阅读，了解更多关于这些强大工具的信息，以及它们如何增强您的深度学习项目。

简介

AutoDL是一个深度学习GPU计算平台，为用户提供稳定可靠、价格公道的GPU算力，链接地址：
AutoDL AI算力云
其他GPU计算资源有：

这里以AutoDL为准介绍GPU算力平台的使用，用户可以根据自己项目的需要进行GPU选型， 官网主页有显卡天梯榜。

半精度和单精度算力官方实测榜单
为保证充分释放GPU的最大算力，需要对机器配置进行综合考量，官方文档如下：
添加链接描述

进入官方微信群可以相互交流技术，反馈问题，还有不定期福利：
AutoDL官方微信群

AutoDL平台操作流程

  1. GPU选型：可根据官方网站提供的图形处理器天梯列表选择图形处理器，这里假设我需要进行半精度计算，根据天梯榜，选择NVIDIA RTX A5000作为计算卡。
  2. 点击算力市场->按量计费，通过切换可用区，发现内蒙A区有闲置的A5000计算卡，注意，一定要选右上角标有网盘支持的卡。
    一定要选右上角标有网盘支持的卡
  3. 选择软件配置后即可使用，即可开始使用GPU，如果你有优惠券，记得勾选它，之后点击立即创建即可。充值500RMB会赠送优惠券，邀请新用户且新用户满足条件后也可以获得优惠券，还可以从官方微信群不定期获取优惠券。

添加基本软件环境，但进去后我们还需要自己配置

  1. 进入实例界面后先关机，此时已经开始计费了，但考虑到我们进去后配置环境、更新Ubuntu系统等操作不需要GPU。我们这里先关机，之后以CPU模式使用实例，这些操作和阿里云的 PAI-DSW 是几乎一致的。
    关机
    选择无卡模式开机，在弹窗上点确定
  2. 此时我们正在以CPU模式运行实例，点击JupyterLab按钮进入操作界面。
    点击JupyterLab进入操作界面
    可以看到，界面和阿里云 PAI-DSW 没有区别

在AutoDL平台上挂载和使用阿里云盘

  1. 点击AutoPanel按钮进入实用程序页面，选择公网网盘选项卡。
    点击AutoPanel按钮进入实用程序页面
  2. 设置独立访问密码，我这里选择阿里云盘，因为阿里云盘上传下载完全不限速，并且我现在已经有40TB空间了，终于暂时解决了我数据集存储的焦虑了，之后使用手机端阿里云盘APP扫码授权token就好。
    使用手机端阿里云盘APP扫码授权token
    我的阿里云盘，到达人Lv3了，放心大胆存数据集
    找到所在路径点击下载即可，可以点击右上角传输任务按钮查看状态
    注意：在使用网盘前，一定确保自己在AutoDL的容量是足够的，如果实例的磁盘容量不够，可以付费扩容数据盘。AtuoDL还提供快照保存等服务，只要你玩过阿里云ECS，那么这里的操作对你来讲会很简单。
    扩容数据盘，按量按时间付费

PS-1：阿里云盘容量不够怎么办？

**解决方案1：**如果你是新用户，找一个达人的分享链接，转存达人的分享文件，你可以获得500GB。这里我已经准备好了，打开「阿里云盘」APP ，点击链接保存t016f49bb411fc14f89.jpg即可。
添加链接描述
**解决方案2：**找一个Lv3以上的阿里云盘达人，询问每月的200GB福利码。
**解决方案3：**做完福利社的卡片任务，做到每日签到。
**解决方案4：**多找几张手机卡注册小号，容量也不会很大，但会很麻烦，不方便管理。
**解决方案5：**充值SVIP，但阿里云盘现在只能充值8TB的会员，已经充值过20TB版本会员的老用户可以继续续费20TB版本。

PS-2：阿里云盘上传数据集，尤其是上万或几万的小文件总是丢文件怎么办？

阿里云盘正常上传文件时容易丢文件或上传失败，我甚至发工单问过这个问题，有以下4种失败可能，但问题并没有得到有效解决。
问题工单
但后面我发现，使用备份空间的文件夹备份功能可以很好的解决这个问题，新建备份空间后云盘会自动同步本地文件。正在同步本地文件

在阿里云盘我的电脑文件夹中可以找到备份文件上传完成后点击取消备份，弹窗提示：云端备份取消成功，云端文件仍为你保存。
取消备份
选择移动可转移备份文件位置
在阿里云盘我的电脑文件夹中可以找到备份文件，此刻的备份文件将多出几个选项，选择移动就可以转移备份文件到其他位置了。
使用这种方法时，一次同步的文件上限是5000个，虽然变少了，但胜在稳定可靠，非常适合几KB的小文件。

PS-3:阿里云盘如何延期？

**解决方案1：**每日签到打卡，可以获得延期卡。

**解决方案2：**参加阿里云盘达人招募计划，参与享最高50TB容量、延期卡等福利。

**解决方案3：**完成福利社任务也有机会获得延期卡。

PS-4:除核心功能外，阿里云盘还提供了一些有用的额外功能

1：移动端搜索阿里云硬盘资源：手机APP端可以在全网搜索阿里云盘资源，更容易找到你需要的文件。

2：订阅：使用阿里云盘的订阅功能，可以关注喜欢的达人，并获得相关资源，比如“影视后期系统教学”，，以获得最新的软件资源和技巧。

3：目前已有针对阿里云盘的资源公众号和网站，下面给出两个资源站。
添加链接描述
添加链接描述

三、测试：使用阿里云ModelScope开放模型

测试环境
添加链接描述

1. 配置Anaconda3环境

# 实验出root文件夹是我所在的工作区
df  -h
ls
cd  ..
ls
cd  root
ls

# 新建download文件夹并修改为最高权限
mkdir download
chmod  -R  777  download/

# 下载并安装Python3.7版本的Anaconda3
cd download/
wget https://repo.anaconda.com/archive/Anaconda3-2021.11-Linux-x86_64.sh
bash  ./Anaconda3-2021.11-Linux-x86_64.sh

Please, press ENTER to continue
>>> 

Do you accept the license terms? [yes|no]
[no] >>> yes

[/root/anaconda3] >>> 
PREFIX=/root/anaconda3
Unpacking payload ...

Do you wish the installer to initialize Anaconda3
by running conda init? [yes|no]
[no] >>> yes

# 重新加载Ubuntu的环境变量
root@autodl-container-1efe11963c-2e759383:~/download# source ~/.bashrc

# 查看版本等信息
(base) root@autodl-container-1efe11963c-2e759383:~/download# conda --version
(base) root@autodl-container-1efe11963c-2e759383:~/download# conda  info  --envs
(base) root@autodl-container-1efe11963c-2e759383:~/download# python  -V

2. 配置ModelScope环境

# 新建虚拟环境
(base) root@autodl-container-1efe11963c-2e759383:~/download# conda create -n modelscope python=3.7

关机，切换为有卡模式运行，以便于查看CUDA等信息。

# 查看环境和显卡CUDA版本
(base) root@autodl-container-1efe11963c-2e759383:~/download# conda  info  --envs
(base) root@autodl-container-1efe11963c-2e759383:~/download# conda  activate  modelscope
(modelscope) root@autodl-container-1efe11963c-2e759383:~/download# nvidia-smi

# 配置modelscope虚拟环境
python -m pip install -U pip

# 安装pytorch
pip3 install torch torchvision torchaudio

# 安装tensorflow
wget https://storage.googleapis.com/tensorflow/linux/gpu/tensorflow_gpu-2.6.0-cp37-cp37m-manylinux2010_x86_64.whl
pip3 install tensorflow_gpu-2.6.0-cp37-cp37m-manylinux2010_x86_64.whl

# 安装modelscope的其他依赖包
wget https://files.pythonhosted.org/packages/47/bb/849011636c4da2e44f1253cd927cfb20ada4374d8b3a4e425416e84900cc/tqdm-4.64.1-py2.py3-none-any.whl
pip3 install tqdm-4.64.1-py2.py3-none-any.whl
pip3 install modelscope
pip3 install modelscope --upgrade
sudo apt-get update
sudo apt-get install libsndfile1
pip uninstall mmcv
pip install -U openmim 
mim install mmcv-full
pip3 install "modelscope[audio,cv,nlp,multi-modal,science]" -f https://modelscope.oss-cn-beijing.aliyuncs.com/releases/repo.html

3. 使用ModelScope

新建一个jupyter文档，复制以下内容运行。

#BAStructBERT分词-中文-新闻领域-base
from modelscope.pipelines import pipeline
from modelscope.utils.constant import Tasks

p = pipeline('word-segmentation', 'damo/nlp_structbert_word-segmentation_chinese-base')
p('阿里巴巴集团的使命是让天下没有难做的生意',)

{'output': ['阿里巴巴',
  '集团',
  '的',
  '使命',
  '是',
  '让',
  '天下',
  '没有',
  '难',
  '做',
  '的',
  '生意']}

#RaNER命名实体识别-中文-电商领域-细粒度-base
from modelscope.pipelines import pipeline
from modelscope.utils.constant import Tasks

p = pipeline('named-entity-recognition', 'damo/nlp_raner_named-entity-recognition_chinese-base-ecom-50cls')
p('eh 摇滚狗涂鸦拔印宽松牛仔裤 情侣款',)

{'output': [{'type': '品牌', 'start': 0, 'end': 2, 'span': 'eh'},
  {'type': '品牌', 'start': 3, 'end': 6, 'span': '摇滚狗'},
  {'type': '款式_其他', 'start': 6, 'end': 8, 'span': '涂鸦'},
  {'type': '款式_其他', 'start': 8, 'end': 10, 'span': '拔印'},
  {'type': '款式_其他', 'start': 10, 'end': 12, 'span': '宽松'},
  {'type': '材质_面料', 'start': 12, 'end': 14, 'span': '牛仔'},
  {'type': '产品_核心产品', 'start': 14, 'end': 15, 'span': '裤'},
  {'type': '款式_其他', 'start': 16, 'end': 19, 'span': '情侣款'}]}

#StructBERT情感分类-中文-通用-base
from modelscope.pipelines import pipeline
from modelscope.utils.constant import Tasks

p = pipeline('text-classification', 'damo/nlp_structbert_sentiment-classification_chinese-base')
p('这件衣服挺好看',)

{'scores': [0.8644708395004272, 0.13552914559841156], 'labels': ['正面', '负面']}

#卡证检测矫正模型介绍
from modelscope.pipelines import pipeline
from modelscope.utils.constant import Tasks

p = pipeline('card-detection', 'damo/cv_resnet_carddetection_scrfd34gkps')
p('http://www.modelscope.cn/api/v1/models/damo/cv_resnet_carddetection_scrfd34gkps/repo?Revision=master\u0026FilePath=description/card_detection1.jpg',)

{'scores': [0.9295773506164551, 0.9260470271110535],
 'boxes': [[446.90692138671875,
   36.372108459472656,
   907.0902099609375,
   337.4408874511719],
  [454.3436584472656,
   336.0853576660156,
   921.2640991210938,
   641.7916259765625]],
 'keypoints': [[457.3525390625,
   339.02154541015625,
   446.7286071777344,
   52.900020599365234,
   902.8233642578125,
   35.05659103393555,
   908.5930786132812,
   325.62213134765625],
  [465.28363037109375,
   642.8425903320312,
   454.39434814453125,
   357.4068908691406,
   902.5476684570312,
   334.18072509765625,
   922.1012573242188,
   621.0780639648438]]}
魔菲赫伯特
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
Qt无标题窗口
05-21
在本文中，我们将深入探讨如何使用Qt框架创建一个无标题窗口，这在界面设计和自定义标题栏美化中非常有用。我们将关注`framelesswidget.cpp`、`main.cpp`、`framelesswidget.h`等核心文件，理解它们在实现无标题窗口...
c#实现无标题栏窗口的拖动
09-05
本篇文章将详细讲解如何在C#中实现这种无标题栏窗口的拖动以及其他基本操作。 首先，为了实现无标题栏窗口的拖动，我们需要处理窗体的鼠标事件。窗体的`FormBorderStyle`属性应设置为`None`，这会去除窗体的边框和...
AutoDL使用百度网盘来进行数据的交互
u014723479的博客
05-15 4709
AutoDL上面其实是可以直接使用百度网盘、阿里云盘等公共网盘的，这样传资料的时候就不用通过Xshell慢悠悠的传输了，如果有百度网盘会员的话，甚至可以实现大文件的秒传其原理可以从下面的这张图上面看出，首先，需要在AutoDL安装一个第三方网盘客户端 AutoPanel，和官方客户端不同的地方在于，这个工具为Server/Brower架构（类比JupyterLab理解，Server可以不在本地电脑，但可以在本地浏览器使用），具体工作流程如下。
关于autodl的使用
m0_65967988的博客
11-10 447
菜单栏tools下的 deployment下的Browse remote host 可以看到远程的文件，就可以点击进行预览和修改，然后在底部的terminal中，选择远程terminal，就可以用命令行进行操控，用cd进到对应目录底下，点击python {xxx}.py， 就可以运行对应的{xxx}.py文件了。尽量将文件整成压缩包，然后上传到一个区（北京A区）的文件存储下面，可以直接点击文件上传，也可以用一些软件工具进行上传。然后在这个区租用实例时，每个实例都可以共享这个文件存储，这样换环境就很方便。
AutoDl系统盘数文件移到数据盘（详细教程）
weixin_45325693的博客
05-23 9958
AutoDl系统盘内存不足，将文件迁移到数据盘，详细教程
AutoDL 使用记录
AncilunKiang的博客
12-01 2858
创建实例需要依次选择：计费方式→地区→GPU型号与数量→主机镜像：基础镜像：方便好用，需要哪个现成的选就行我的镜像：选自己的镜像更是方便的很如何保存镜像：自己创建镜像的话 30GB 以下免费，超出部分每 1G 一天一分钱。入口：容器实例→操作→更多→保存镜像哪些文件夹会保存在镜像中详见 JupyterLab 中的文件夹介绍等待创建成功与启动浅浅的等他创建好创建好启动后即可进入 JupyterLab 进行进一步的操作JupyterLab 中的操作其实很够用了。
autoDL实践经验------1
Jormungand123的博客
04-02 9485
总结一下实际使用autoDL的经验： 提一嘴：跑的还是之前博客里的yolov3。 1、应保留预训练权重文件，但训练后的权值文件不用上传，因为太费时间。 2、昨日步骤：首先登陆filezilla然后把数据集和python文件上传上去，然后在vscode上登陆，安装所要依赖pip install -r requirements.txt（ubuntu下依旧可以用pip），再把数据集放到VOCdevkit下，其实放别的地方也行，可以改路径的，但一定要注意统一格式VOC2007下Annotations、JPEG
VC去掉'无标题'字样的方法.zip
11-21
在使用Visual C++进行编程时，我们经常会在创建新的窗口或者对话框时默认看到标题栏显示为“无标题”。这可能会对用户界面的美观性和专业性造成一定的影响。本资料包提供了一种方法来帮助开发者去掉这个“无标题”...
visual c++取掉对话框窗口的 -无标题 字样的方法
08-04
在Visual C++编程环境中，创建窗口应用程序时，默认情况下，窗口标题栏可能会显示“-无标题”字样，这通常是由于没有正确设置窗口类或没有自定义窗口标题所导致的。要解决这个问题，我们需要深入理解Windows API中的...
Android 全屏无标题栏的三种实现方法
09-02
在Android应用开发中，有时我们需要实现全屏无标题栏的效果，以提供更加沉浸式的用户体验。以下将详细介绍三种在Android中实现全屏无标题栏的方法。 ### 方法一：通过Java代码 在Activity的`onCreate()`方法中，在...
AutoDL云服务器的使用
醋酸洋红的博客
09-21 2044
使用此云服务器的优势学生认证，省钱可无卡模式启动，省钱上传数据比较方便网站。
算力云AuToDL使用教程 （开机镜像环境配置）
qq_43583767的博客
02-01 5586
注意：如果没有二次编译代码的需求，正常情况下不需要单独安装CUDA/cuDNN，因为框架都内置了编译好的CUDA，框架版本和CUDA版本是对应的，只需要关注框架版本即可，无需独立关注CUDA版本。平台内置的所有镜像都安装了Miniconda，安装路径为/root/miniconda3/。
如何配置AutoDL？
Metaphysicist的博客
01-15 2187
配置AutoDL服务器实用教程
如何在autodl跑自己的模型
lmd187的博客
12-30 417
如何使用AutoDl平台跑自己的模型（纯干货，步骤很详细）-CSDN博客
零基础搭建Stable Diffusion绘图环境
最新发布
panz1024的博客
04-01 1813
①首先鼠标右键点击桌面底部任务栏，打开任务管理器②看到性能里面的内存，后面这个数字就是我们电脑的运行内存，也就是图片中划线的数字这个内存如果显示的是8GB，那就说明你的电脑刚好达到使用SD的标准③点击GPU，先看右上角的第一个单词如果是“NVIDIA”就代表是N卡如果是AMD就是A卡接着看到下面专用GPU内存，后面的数字就是我们电脑的显存显存需要在4GB以上，才能用SD出图大家就按照自己电脑的实际情况，选择是在自己电脑本地下载软件，还是租用云平台。
利用autodl服务器跑模型
学习，学无止境
03-20 955
最后执行代码训练指令（博主自用，可以根据自己文件实际需要对应修改）在此位置进行开关机操作，若停止服务器，必须关机，不然会一直扣钱。在命令行中使用unzip指令对下载好的压缩文件进行解压（根据解压位置，选择根目录路径，使用cd进入想要的目录层。选择上传好的文件，点击下载。选择AutoPanel。
超级详细！！！新手使用AutoDL跑深度学习（MixVPR项目）的学习记录
热门推荐
weixin_45152283的博客
10-17 1万+
新手第一次在AutoDL上跑深度学习的实验，遇到一些问题，简单记录一下。如果大家发现问题，欢迎和我讨论。
AutoDl服务器模型训练方法
wang2395的博客
08-15 475
4、pip requirements.txt 用pycharm或网站jyputer训练。开实例，打开AutoPanel的公共网盘进行授权->3、网盘下载到实例 （可以不用压缩包，直接传文件）1、数据文件先传到百度网盘/阿里云盘。5、训练完的数据上传到网盘。
Linux下将系统盘数据迁移到数据盘
涅槃的博客
10-13 1万+
Linux下将系统盘数据迁移到数据盘一、创建分区1、查看数据盘是否已经分区2、对数据盘进行分区3、格式化分区二、迁移数据三、挂载分区1、通知系统内核分区表的变化，不然内核不知道分区2、挂载分区3、设置开机自动挂载 在一次项目中，由于linux服务器中系统盘数据增长过快，需要将系统盘数据迁移到数据盘中，现以迁移mysql数据为例简述迁移过程。 一、创建分区 1、查看数据盘是否已经分区 命令如下： f...
设置无标题 android
05-02
在Android应用中，设置无标题是一种简洁和美观的设计方式，可以为用户提供更流畅的使用体验。以下是一些实现设置无标题的方法： 1. 在Android的Manifest文件中，找到对应Activity的标签，并添加”android:theme="@android:style/Theme.NoTitleBar"“属性。这样可以通过Android自带的主题去掉标题栏。 2. 使用自定义的主题，可以在样式表中添加以下代码： <style name="AppTheme" parent="Theme.AppCompat.NoActionBar"> <!-- ...其他样式... --> </style> 这种方式可以通过设置主题去除ActionBar和标题栏，同时保留其他布局元素。 3. 去掉代码中的setTitle()方法，这是一种最简单的方法，通过不设置Activity的标题来实现无标题。 以上就是三种常见的实现Android无标题的方式，开发者可以根据实际需求进行选择。值得注意的是，去除标题栏可能会影响用户的导航体验，因此在设计上需要考虑周全。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

魔菲赫伯特

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值