【昇腾开发全流程】MindSpore华为云模型训练

专栏 - 昇腾AI

1. 【昇腾开发全流程】MindSpore华为云模型训练
2. 【昇腾开发全流程】AscendCL开发板模型推理

前言

学会如何安装配置华为云ModelArts、开发板Atlas 200I DK A2。
并打通一个Ascend910训练到Ascend310推理的全流程思路。

在本篇章，我们首先开始训练阶段！

训练阶段

A. 环境搭建

MindSpore 华为云 模型训练

Step1 创建OBS并行文件

1. 登录华为云 -> 控制台 -> 左侧导航栏选择“对象存储服务 OBS” ->
   在左侧导航栏选择“桶列表” -> 单击右上角“创建桶”
   如下图所示：
   
2. 在左侧列表中的“并行文件系统” -> 单击右上角“创建并行文件系统”。
   如下图所示：
   
   进行以下配置：
   

   主要参数信息如下，其余配置请保持默认配置
   区域：选择“华北-北京四”
   文件系统名称：自定义，本例使用modelarts0009
   （请使用modelarts作为文件系统前缀，注意名称为全局唯一）
   数据冗余存储策略：选择“单AZ存储”
   策略：选择“私有”

Step2 上传数据文件至OBS并行文件系统

1. 点击已创建的并行文件系统 -> 点击“新建文件夹”
   输入文件夹的名称，这里命名为input
   
2. 进入该文件夹中 -> 点击“上传文件”：
   将准备好的项目工程文件压缩包上传至该OBS中。

Step3 基于ModelArts创建Notebook编程环境

1. 在“全局配置”页面查看是否已经配置授权，允许ModelArts访问OBS：
   登录华为云 -> 控制台 -> 左侧导航栏选择“ModelArts” -> 在左侧导航栏选择“全局配置” -> 单击“添加授权”
   首次使用ModelArts：直接选择“新增委托”中的“普通用户”权限
   

2. 登录华为云 -> 控制台 -> 左侧导航栏选择“ModelArts” -> 在左侧导航栏选择“开发环境”-> “Notebook” -> 点击“创建”
   进行以下配置：

   主要参数信息如下，其余配置请保持默认配置
   名称：自定义，本例使用notebook-test
   自动停止：自行选择，本例选择4小时
   镜像：选择“公共镜像”，并选择“mindspore_1.10.0-cann_6.0.1-py_3.7-euler_2.8.3”
   资源类型：选择“公共资源池”
   磁盘规格：使用50GB

Step4 为Notebook编程环境添加训练阶段项目工程文件

1. 点击已创建的Notebook -> “存储配置” -> “添加数据存储”
   进行以下配置：
   

   本地挂载目录：自定义创建本地挂载目录，本例使用**/data/input**
   存储位置：选择所创建的并行文件系统（本例选择已创建的moderarts0009），以及数据集所在的目录input

2. 返回Notebook界面 -> 点击“打开”notebook-test ->
   打开“Terminal”命令行终端界面 ->
   执行以下命令，创建用于测试的test文件
   touch /data/input/test
   再执行以下命令，可以看到你刚创建的test文件&am