TPAMI 2024 | 偏振Helmholtz立体视觉

Polarimetric Helmholtz Stereopsis

题目：偏振Helmholtz立体视觉

作者：Yuqi Ding, Yu Ji , Zhang Chen , Mingyuan Zhou , Sing Bing Kang, and Jinwei Ye

---

摘要

Helmholtz立体视觉（HS）利用光传播的互易性原理（即Helmholtz互易性）对任意反射率的表面进行3D重建。在本文中，我们提出了偏振Helmholtz立体视觉（polar-HS），通过考虑互易路径上的光偏振态，扩展了经典的HS。利用偏振的附加相位信息，polar-HS只需要一对互易图像对。我们推导出Mueller矩阵的互易关系，并制定了新的考虑偏振态的互易性约束。我们还利用偏振度量，并将其扩展到透视投影的情况。为了恢复表面深度和法线，我们将互易性约束与漫反射/镜面反射偏振度量结合在统一的优化框架中。对于深度估计，我们进一步提出利用偏振角的一致性。对于法线估计，我们基于线偏振度开发了一种法线细化策略。使用硬件原型，我们展示了我们的方法可以为不同类型的表面生成高质量的3D重建，从漫反射到高度镜面反射。

关键字

• 3D重建
• Helmholtz互易性
• 偏振

I. 引言

从2D图像重建3D表面是计算机视觉中长期存在的问题。现实世界物体复杂的表面反射特性使这个问题极具挑战性。所有现有方法都限于某些类型的表面反射率。例如，被动技术检查在非紧