商用数据标注平台参考-华为云ModelArts

官网：https://support.huaweicloud.com/modelarts/index.html

数据准备与分析

创建数据集

创建数据集

标注数据、导入数据、数据集发布等操作，都是基于创建的数据集进行的。

ModelArts新版数据集在旧版的基础上将创建数据集和创建标注任务进行了解耦，创建数据集和创建标注作业分别是独立的任务，使用更灵活。

1. 登录ModelArts管理控制台，在左侧菜单栏中选择“数据管理> 数据集”，进入新版“数据集”管理页面。
2. 单击“创建数据集”，进入“创建数据集”页面
   填写数据集基本信息，数据集的“名称”、“描述”、“数据格式”、“数据类型”和“数据集输出位置”。
   数据集创建完成后，系统自动跳转至数据集管理页面，针对创建好的数据集，可以执行数据导入、发布、修改、删除、数据处理、数据标注、数据特征、版本管理和导出操作。

数据发布

数据发布简介

在数据准备过程中，针对同一数据源的数据，对不同时间处理或标注后的数据，按照版本进行区分，方便后续模型构建和开发时选择对应的数据集版本进行使用。

数据导出

数据导出简介

• “物体检测”只支持导出Pascal VOC格式的XML标注文件。

数据标注简介

数据标注简介

• 人工标注：用户创建单人标注作业，对数据进行手工标注。
• 团队标注：对于大批量的数据，用户可以通过创建团队标注作业，进行多人协同标注。

团队标注

团队标注简介

可以由多人组成一个标注团队，针对同一个数据集进行标注管理。

支持将标注任务指派给不同的团队，由多人完成标注任务。同时，在成员进行数据标注过程中，支持发起验收、继续验收以及查看验收报告等功能。

创建和管理团队

管理团队

1. 在导航栏中，选择“数据管理>标注团队”，进入“标注团队”管理页面。
2. 在“标注团队”管理页面，单击“添加团队”。
3. 在弹出的“添加团队”对话框中，填写团队“名称”和“描述”，然后单击“确定”。

管理成员

添加成员

1. 在ModelArts管理控制台左侧导航栏中，选择 “数据管理>标注团队” ，进入“标注团队”管理页面。

2. 在“标注团队”管理页面，从左侧团队列表中选择一个团队，单击团队，其右侧区域将呈现 “团队详情” 。

3. 在 “团队详情” 区域，单击“添加成员”。

4. 在弹出的“添加成员”对话框中，按照分类，可选择“当前账号”或“其他账号”。选择“其他账号”，需要填写成员的“账号ID”“IAM用户ID”“角色”“描述”，单击左下角“添加账号ID”。填写完成之后，然后单击“确定”。

   邮箱作为团队管理中的唯一标识，不同成员不能使用同一个邮箱。

   其中，“角色”支持“Labeler”、“Reviewer”和“Team Manager”，“Team Manager”只能设置为一个人。

删除成员

• 删除单个成员

  在“团队详情”区域，选择需要删除的成员， 单击“操作”列的“删除”。在弹出的对话框中，确认信息无误后，单击“确定”完成删除操作。

• 批量删除

  在“团队详情”区域，勾选需删除的成员，然后单击“删除”。在弹出的对话框中，确认信息无误后，单击“确定”完成多个成员的删除操作。

创建团队标注任务

如果您在创建标注作业时，即启用团队标注，且指派了某一团队负责标注，系统将默认基于此团队创建一个标注任务。

您还可以重新创建一个团队标注任务，指派给同一团队的不同成员，或者指派给其他标注团队。

团队标注作业的创建方式

• 从控制台的“数据管理 >数据标注”页面进入，创建标注作业时，打开“启用团队标注”开关，同时指定一个标注团队，或者指定标注管理员。
• 从控制台的“数据管理 >数据集”页面进入，对于同一个数据集，可以创建多个团队标注任务。可以在数据集列表中创建团队标注任务

说明：

• 当标注人员第一次收到标注邮件时，会告知标注的地址以及默认初始密码。
• 只有当创建团队标注任务时，标注人员才会收到邮件。
• 标注任务创建完成后，会将所有未标注状态的样本分配给标注人员。分配采用随机均分的策略，不支持重复分配。

登录数据标注平台

数据标注平台，仅在团队标注场景下使用，此平台仅包含基础的数据预览、数据标注能力，面向团队标注任务中的Labeler和Reviewer使用。

启动团队标注任务

在标注平台中，每个成员可查看“未标注”“待修正”“已驳回”“待审核”“审核通过”“验收通过”的图片信息。请及时关注管理员驳回以及待修正的图片。

当团队标注任务中，分配了Reviewer角色，则需要对标注结果进行审核，审核完成后，再提交给管理员验收。

审核团队标注任务结果

团队标注成员完成后，团队审核者可以在数据标注平台上对标注结果进行审核。

1. 登录数据标注平台，在任务列表中单击“审核”，发起审核。

2. 在审核页面中，审核人员可以查看“未审核”“已审核”“审核通过”“审核不通过”的样本。

3. 审核人员可以在审核页面的右侧选择“审核结果”（“通过”或“不通过”）。

   当选择审核结果为“通过”时，需设置“验收评分”（分“A”“B”“C”“D”四个选项，“A”表示最高分）。当选择审核结果为“不通过”时，可以在文本框中写明驳回原因。

验收团队标注任务结果

当团队的成员已完成数据标注，标注作业的创建者可发起验收，对标注结果进行抽验。只有当标注成员存在标注完成的数据时，才可以发起验收，否则发起验收按钮为灰色。

1. 录ModelArts管理控制台，在左侧菜单栏中选择 “数据管理 >数据标注” ，打开数据标注管理页。
2. 在数据标注作业列表，选择团队标注作业，点击作业名称进入“标注作业详情页”，单击右上角 “验收” ，发起验收。
3. 在弹出的对话框中，设置“抽样策略”，可设置为“按百分比”，也可以设置为“按数量”。设置好参数值后，单击“确定”启动验收。
4. 验收启动后，界面将展示实时验收报告，您可以在右侧选择“验收结果”。当选择验收结果为“通过”时，需设置“验收评分”（分“A”“B”“C”“D”四个选项，“A”表示最高分）。当选择验收结果为“不通过”时，可以在文本框中写明驳回原因。