CCF ChinaSoft 2023 竞赛巡礼 | 机器人大模型与具身智能挑战赛

2023年CCF中国软件大会（CCF ChinaSoft 2023）由CCF主办，CCF系统软件专委会、形式化方法专委会、软件工程专委会以及复旦大学联合承办，将于2023年12月1-3日在上海国际会议中心举行。

本次大会主题是“智能化软件创新推动数字经济与社会发展”，学术、工业、教育、竞赛等分论坛活动40余场，期待您的参与！

目前大会火热报名中！早鸟注册（early-bird registration）10月22日截止，提前注册付费锁定注册费优惠权益。

CCF ChinaSoft 2023官方首页：

http://chinasoft.ccf.org.cn/

点击文末“阅读原文”进入官方注册通道:

https://conf.ccf.org.cn/chinasoft2023

✦  +

+

竞赛预告

竞赛名称：机器人大模型与具身智能挑战赛

一、大赛简介: 

        机器人应用是人工智能时代最具有挑战性的前沿科学技术难题之一，它汇集了人工智能和机器人核心技术，包括人工智能学的智能感知、认知和决策的各种算法能力，以及机器人学在传感器、控制器和执行器的高可靠、高精确的运动和控制能力。

        预训练大模型GPT技术的突破，可以为机器人提供智慧的大脑。同时，具身智能机器人是一个具有物理实体、可与真实世界进行多模态交互，像人类一样感知和理解环境，并通过自主学习完成任务的智能体。二者的结合将使机器人做到“心灵手巧”。

        达闼云端机器人国家新一代人工智能开放创新平台与中国计算机学会、AITISA联盟、OpenI启智、CCF开源发展委员会、北京大学、复旦大学、北京航空航天大学、中山大学、北京邮电大学、北京智谱联合，共同举办达闼杯“机器人大模型与具身智能挑战赛”，旨在鼓励开发者能够利用大模型技术和具身智能技术，实现跨模态人机交互、并能自主完成各种复杂任务的机器人应用。

        为此，我们提供一个比赛平台，在模拟环境中实现机器人（Agent）的各项任务。基于比赛平台，参赛者可以结合大规模视觉和语言预训练模型（LLMs, CLIP等）算法来训练机器人完成复杂的任务。大赛鼓励参赛者采用各种人工智能技术和工具，包括但不限于大语言模型（LLMs）、多模态视觉理解模型、深度学习和强化学习，来提高机器人的具身智能能力。

        “机器人具身智能挑战赛”作为CCF中国软件大会的赛事内容，向来自学术界、工业界和研究机构的团队开放。参赛者需要提交详细的技术报告，描述他们系统的设计、实现和评估。通过本次比赛，参赛者既可以学习和提升人工智能和机器人领域的知识与技术，还可以与顶级专家直接交流，共同探讨通用人工智能的未来发展。另外，大赛配备了免费的算力支撑，各路勇士们，还在犹豫什么，快快组队参赛吧！

二、奖项设置：

        根据组委会和评委评分，大赛将选出一、二、三等奖以及专项奖，具体奖励金额如下表所示：

奖项	名额	奖金
一等奖	1	¥30000
二等奖	2	¥20000
三等奖	3	¥10000
专项奖	4	¥10000

三、赛题设计：

        大赛包含规定任务和开放任务两个赛道，有关各赛道的详细赛题、仿真环境与技术支持的说明，请通过“阅读原文”链接到大会网站，或参见文末“比赛指南”链接。

1. 总体目标任务

        在仿真环境中，参赛者通过大模型训练机器人在咖啡厅场景成为合格的咖啡厅服务员。这项比赛的考核要点是将大语言模型（LLMs）整合到机器人系统中，开发能够理解自然语言并以友好和有效的方式与人类互动，并能在咖啡店仿真场景中自主完成各种服务任务的智能机器人。

        选手可以按照一般常识性理解，进行机器人任务设定和训练。在仿真场景中，机器人可以与可交互的物品和NPC进行互动操作的训练，比如：咖啡店服务员与顾客（NPC）互动、接受和执行订单以及回答有关菜单的问题、导航、操作咖啡机、清理桌子/地面、开空调/开灯、递送咖啡/饮料/食物等。

2. 考核要点

▪主动探索和记忆（Active Exploration and Memorization）：机器人在环境中通过主动探索获得各种环境信息，实现对位置环境的感知，形成以环境感知信息以及运动轨迹等历史信息维护一个机器人自身的记忆库。

▪场景多轮对话（Grouded Question Answering）：多轮对话要求机器人智能体具有与人进行流畅的交流能力，具身对话是机器人利用视觉等传感器获得的场景信息基础上，完成于场景相关的对话。

▪视觉语言导航（Vision Language Navigation）：导航是构建智能机器人的一个基本要素。在现实场景中，一个机器人要在不同的场景下承担多种复杂的导航任务。我们的模拟器支持多任务的现实世界导航和物体互动。对于这个任务中的导航，尽管有传统的ObjectNav和PointNav，你可以利用我们的环境完成简单到复杂的视觉语言导航，并有不同难度的指示，以及交流导航，机器人智能体可以在导航中寻求帮助。

▪视觉语言操作（Vision Language Manipulation）：抓取是指机器人使用机械臂抓取物体并将其从一个原始位置移动到目标位置的动作。尽管机器人学习算法在现有的挑战上取得了很大的突破和改进，但仍有许多问题亟待解决。这项任务要求机器人按照视觉和语言的场景描述来抓取一个物体。虽然Saycan和RT-1在以前的研究中被用来实现使用Deep-RL算法的抓取，但这项任务更侧重于在现实环境中抓取薄、大、平、软的物体，避免碰撞，以及多任务抓取。参赛者需要根据大语言模型提供的指令，解决在不同场景下抓取不同物体的问题。具体抓取物品的技能需要参赛者基于提供的环境和工具接口，通过强化学习等方式进行训练。

3. 评估

        参赛队必须将LLMs纳入其机器人系统，以促进自然语言的理解和互动。比赛将根据以下标准来评估机器人系统的性能：

▪ 任务完成的准确性和效率：参赛者将被评估任务完成的准确性和效率，包括物体操作、导航到准确位置的精度，执行推理速度，订单执行和人机互动。机器人必须准确、高效地完成任务，才能获得分数。

▪ 人与机器人的互动：参赛者将被评估其机器人与顾客和工作人员互动的自然度和友好度。机器人必须以自然和友好的方式进行交流，以获得积分。

▪ 时间限制：参赛者将有规定的时间来完成任务，在规定时间内得分最高的团队将被宣布为获胜者。

四、赛事安排：

1. 参赛对象

        机器人具身智能挑战赛对来自全球学术界、工业界和研究机构的团队开放，包括：

▪在机器人和人工智能方面有专长的大学和研究机构

▪专门从事机器人和人工智能应用的初创企业和公司

▪独立的机器人爱好者和业余爱好者

2. 比赛过程和时间安排

        机器人具身智能挑战赛将在CCF中国软件大会会议期间举行。比赛将由多轮比赛组成，每轮比赛测试机器人执行特定任务的能力。

第一阶段：初赛

初赛作品提交截止日期：2023年10月25日

公布入选决赛名单日期：2023年10月30日

第二阶段：决赛

决赛作品提交截止日期：2023年11月26日

公布决赛结果名单日期：2023年12月3日

决赛和颁奖在CCF中国软件大会上举行。

3. 参赛作品提交与评分规则

        除挑战赛统一要求文档外，提交内容还包括方案设计文档、RDK技能开发蓝图源文件，以及录制的运行结果视频。凡提交的参赛作品，赛事组织方拥有永久的使用权，如经过审核后发布到海睿机器人技能应用商店（Robot Skill Store），获得的收益将按一定比例和平台分成（具体细节以最终官方公布为准）。作品提交具体方式和技术交流社区请通过“阅读原文”链接到大会网站，或参见文末“作品提交说明”与“比赛指南”链接。

        评分规则：分为总分排行与单项排行两种名次。

1）总分排行规则：场景下有多个任务，任务得分为完成这些任务的分数相加；每位选手按比赛要求提交设计文档、录制视频、蓝图源文件等内容，组委会进行评审打分。

2）单项排行规则：场景下有多个任务，每个任务单独进行分数排行；每位选手按比赛要求提交设计文档、录制视频、蓝图源文件等内容，组委会进行评审打分。

3）决赛：赛事评委按照大赛组委会的相关规定和要求，对选手的作品进行计分、排名。当分数相同时，文档质量等将成为附加排序依据。约前 30% 的队伍进入答辩环节，参加答辩的队伍最终排名依据测试排名（权重 65%）与答辩排名（权重 35%）的综合排名。

4）如果因题目难度过大或版本等不可抗因素，导致无团队完成任意一个任务，组委会重新评审后，设定新的打分标准，按新的标准重新打分。如违背大赛规定规范，可能会被取消参赛资，具体内容由大赛组委会规定。

4. 反抄袭与反作弊

1）禁止多账户报名，否则取消所有成绩及比赛资格。

2）禁止利用任何规则漏洞或技术漏洞等不良途径提高成绩排名，禁止任何不诚信行为，一经发现取消所有成绩及比赛资格。

五、组织架构：

主办单位：

中国计算机学会

承办单位：

中国计算机学会软件工程专委会、系统软件专委会、开源发展委员会、达闼机器人

协办单位：

AITISA联盟、OpenI启智、北京大学、复旦大学、北京航空航天大学、中山大学、北京邮电大学、北京智谱华章科技有限公司

名誉主任：

梅    宏——中国科学院院士

黄晓庆——达闼机器人创始人、董事长兼CEO

主任：

金    芝——中国计算机学会常务理事及系统软件专委会主任、北京大学教授

执行主任：

彭    鑫—— CCF软件工程专委会副主任、CCF开源发展委员会常务委员、复旦大学计算机科学技术学院副院长

副主任：

余    跃——新一代人工智能产业技术创新战略联盟(AITISA)、OpenI启智开源平台运营中心主任

郭    耀——北京大学计算机学院副院长，CCF系统软件专业委员会执行委员

胡春明——北京航空航天大学软件学院院长，CCF系统软件专业委员会委员、青年计算机科学家论坛学术委员会委员

王    斌——达闼机器人副总裁

委员：

董    震——复旦大学计算机科学技术学院青年副研究员

梁小丹——中山大学智能工程学院副教授

郭    迪——北京邮电大学人工智能学院教授

马世奎——达闼机器人研发副总裁

刘德兵——北京智谱华章科技有限公司董事长

大赛冠名

达闼杯

报名参赛请扫描二维码：

附录：

比赛指南：

http://chinasoft.ccf.org.cn/notice/赛题指南.pdf

作品提交说明：

http://chinasoft.ccf.org.cn/notice/作品提交说明文档.pdf