智慧驾驶的“眼睛”：大连理工大学基于昇思MindSpore打造智慧驾驶AI视觉感知技术解决方案

智慧之眼，驾驭未来

本项目为大连理工大学“智驾视界”团队在中国国际大学生创新大赛产业命题赛道国家银奖作品。团队在对命题解析后，得出现有智能驾驶视觉大模型车载部署的三大难题：

难题1：现有感知技术在复杂场景易造成误判、产生危险。

难题2：现有车载识别大模型缺乏一体化分析策略，阻碍多任务的协同高效执行。

难题3：现有大模型参数量大无法部署到端侧。

“智驾视界”团队针对行业痛点，攻克了无人驾驶技术在优化压缩关键环节中所面临的精度损失难题，推出通用高效的智慧驾驶视觉感知优化方案，开发了基于昇思MindSpore 的模型优化压缩核心技术。

点亮智慧驾驶技术亮点

该方案专注于为自动驾驶领域打造高性能的AI视觉技术一体化能力，旨在满足用户在不同应用场景下、面向不同平台和车载终端设备的需求。方案以精度高、通用性强、速度快为核心特点，能够在各种复杂驾驶场景中提供卓越的AI视觉算法性能。在昇思MindSpore AI框架的推动下，“智驾视界”团队实现了对解决方案的部署与优化，有望获得在自动驾驶领域的进一步推广。

核心技术方案示意图

• 团队通过对驾驶场景中复杂、罕见和极端情况进行自动化挖掘，高度提升了算法的鲁棒性和适应性。进而不断优化和增强视觉模型的性能，使其在面对各种挑战时表现更出色。而后通过整合视觉、语言、激光雷达等多种传感器数据，利用多模态协同学习的优势，提升了自动驾驶系统的整体感知能力。团队研发的轻量化技术充分发挥了昇思MindSpore AI框架在模型压缩和优化方面的优势，显著减小了模型尺寸，提高了计算效率，降低了能耗，昇思MindSpore的灵活性和高效性使得本方案可以在资源受限的端侧设备上高效运行，确保了高精度和高速度的同时，实现了易于部署的目的。

• 基于昇思MindSpore框架进行项目开发，极大地推动了团队技术从理论到实际应用的转化，解决了模型部署中的许多挑战，使得高性能的AI视觉模型能够被高效部署到各种计算受限环境中，从而推动自动驾驶技术的发展。当前，团队通过不同渠道与下游客户建立链接，面向政府部门与企业客户，既提供通用的API调用服务，同时也根据不同应用场景的具体需求提供定制优化的服务。

未来已来，“智驾视界”将用“AI+”智慧驾驶技术为更多传统产业赋能，快速实现科技成果转化。

“智驾视界”团队介绍：

“智驾视界”是一支由大连理工大学在校学生创立的智慧驾驶AI视觉感知技术解决方案供应团队，由国家杰青卢湖川教授、未来技术学院王立君副教授、创新创业学院王一帆老师等多名教师联合指导，大连理工大学刁海文、殷祺云、李万里、徐欣然、苏博涵、穆超前、严彬、陈俊松、张鹏宇、张婧茹、孙一萌为主要团队参与成员。团队连续五年在AI视觉领域世界最强赛事VOT中斩获冠军，发表领域高水平学术论文30余篇。

更多推荐

昇思MindSpore2.3版本已经正式上线，增强动/静态图与大模型能力，欢迎体验！详细特性介绍请戳下文了解。

安装信息：https://www.mindspore.cn/install