Binding Touch to Everything: Learning Unified Multimodal Tactile Representations【主要工作】
统一多模态触觉表示模型:通过将触觉嵌入与预训练的视觉嵌入对齐,利用对比学习,实现了触觉与其他模态的共享多模态嵌入空间。任务统一与扩展:UniTouch统一了许多现有的触觉感知任务,并显著扩展了触觉感知可以应用的任务范围。共享多模态嵌入空间:通过将触觉嵌入与预训练的视觉嵌入对齐,利用对比学习,实现了触觉与其他模态的。本文提出了一个名为UniTouch的统一多模态触觉表示模型,专门用于基于视觉的触觉传感器。探索更多的跨模态任务:除了已经涉及的任务,未来的工作可以探索更多的跨模态任务,如。
原创
2024-09-29 20:15:18 ·
245 阅读 ·
0 评论