多模态: 点云+文本 | 通过 CLIP 理解点云:PointCLIP

本文提出PointCLIP,一种利用CLIP预训练知识理解和分类3D点云的方法。通过将点云投影到多视图深度图,实现从2D到3D的高效知识转移。通过适配器进行特征融合,提升跨模态零样本分类性能。实验证明,PointCLIP在3D数据集上展现出强大的性能,且能与传统3D网络互补,提升识别效果。
摘要由CSDN通过智能技术生成

图片

论文题目:《PointCLIP: Point Cloud Understanding by CLIP

论文作者:Renrui Zhang, Ziyu Guo, Wei Zhang, Kunchang Li, Xupeng Miao, Bin Cui, Yu Qiao, Peng Gao, Hongsheng Li

作者机构:Shanghai AI Laboratory(上海人工智能实验室)、School of CS and Key Lab of HCST, Peking University(北京大学计算机学院及HCST重点实验室) 、CUHK-Sense Time Joint Laboratory, The Chinese University of Hong Kong(香港中文大学-商汤科技联合实验室 ) 、Centre for Perceptual and Interactive Intelligence (CPII) (  感知与交互智能研究中心)

项目代码:https://github.com/ZrrSkywalker/PointCLIP(基于 PyTorch )

在公众号「3D视觉工坊」后台回复「原论文」,可获取对应论文pdf文件。


  • 20
    点赞
  • 14
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值