#今日论文推荐# 纸质说明书秒变3D动画,斯坦福大学吴佳俊最新研究,入选ECCV 2022

斯坦福大学吴佳俊团队研发了一项技术,能将纸质乐高说明书转化为3D动画。这项名为MEPNet的方法在无需groundtruth图像的情况下,通过两个阶段预测并连接零件,将2D关键点反投影到3D图像中。在数据集上,MEPNet的表现优于现有方法,并且能用合成数据训练,应用于现实场景。该研究论文已被ECCV2022接受。
摘要由CSDN通过智能技术生成

#今日论文推荐# 纸质说明书秒变3D动画,斯坦福大学吴佳俊最新研究,入选ECCV 2022

有没有空间感差的小伙伴,每次拿到乐高说明书都不知如何下手?
这回,可以动的乐高说明书来了!
清华姚班校友、斯坦福大学助理教授吴佳俊,带领团队研发了一项能把纸上的说明书转化为3D动画的技术,目前该论文已入选2022年计算机视觉顶会ECCV。

MEPNet的运行有两个阶段。第一阶段要做的,是将基础形状和新零件的3D模型、目标形状的2D图像作为输入信息,为每个零件预测一组2D关键点、旋转角度和掩码。
在第二阶段中,通过寻找基础形状和新零件之间的可能联系,再将第一阶段预测的2D关键点反向投影到3D图像中。
值得一提的是,这个方法在训练时不需要任何ground truth图像。
另外,MEPNet的数据集表现优于其他现有方法。与基于端到端的学习方法相比,MEPNet保持了基于机器学习的模型效率,并可以被更好地推广到生成未知的3D对象上。
最值得注意的是,MEPNet能够利用合成数据进行单独训练,从而应用到真实的生活场景中。

论文题目:Translating a Visual LEGO Manual to a Machine-Executable Plan
详细解读:https://www.aminer.cn/research_report/62e89edc7cb68b460ff9ae78icon-default.png?t=M666https://www.aminer.cn/research_report/62e89edc7cb68b460ff9ae78
AMiner链接:https://www.aminer.cn/?f=cs

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值