多视角三维边缘重建

Multi-View Stereo 3D Edge Reconstruction


2018 IEEE Winter Conference on Applications of Computer Vision

这是一篇讲述从多视图的角度进行三维边缘重建的文章。
之前的方法主要从视频中重建直线或者边缘点,但是无法重建曲线。这篇paper1. 提出了EdgeGraph3D system,可以从无序的图像序列中重建出直线和曲线的三维坐标。2. 提出了一个基于图的二维边缘表示方式,从而鉴定出最重要的structurally significant edges。
优点: 和传统的photometric reconstruction system 比,对于光照变化和反射更加鲁棒。

问题:1. 要多少张图像?2. 精度有多高?3. 边缘点不包括曲线的边缘点吗?有点模糊不清。

创新:目前现有的算法,只能重建直线边缘,并且通过视频序列来简化边缘匹配的流程,应用于三维重建,相机追踪,以及SLAM算法中,但是缺少一种通用的3D边缘重建算法,这篇文章提出了从一系列无序的图像中,重建出三维点云的算法。

2D edge-graph, 定义了一个计算距离的公式,来filter多余的边缘,我觉得这个基于距离的filter,其实是做烂了的,不过他把element的形式改变了,就可以说,需要换一个新的公式来表述。这个点感觉没多大启发,主要是用来去除不重要的边缘,并连接了一些间断边缘,对我们意义不大。
用polyline来表示curve,在我看来,仍然降低了精度,就是把曲线换成一堆直线的连接了。(a sequence of straight line segments)

重建,还是基于一系列的图像的,even if unordered, not two

video sequence

still need multiple images for matching.
requires at least three images from different views to work.

But binocular stereo vision should require only two images.

We evaluate the results obtained by EdgeGraph3D on
the fountain-P11 sequence of the EPFL dataset [21] and
on 6 sequences of the DTU dataset [10] by reconstructing
the 3D edges, extracting a point cloud by finely sampling
them, used to reconstruct a mesh using the algorithm in [19]
which is then compared with the ground truth.

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
对于深度学习三维重建(Multi-View Stereo,MVS),最常用的方法之一是使用卷积神经网络(Convolutional Neural Networks,CNN)进行处理。MVS 是通过从多个视角的图像中恢复场景的三维几何形状。下面是一个使用深度学习进行 MVS 的基本步骤: 1. 数据准备:收集多个视角的图像,并估计它们之间的相机姿态。通常会使用结构光或者多视角立体摄影机等硬件设备来获取这些信息。 2. 特征提取:对每个图像进行特征提取,例如使用卷积神经网络(CNN)提取图像的特征表示。常用的网络架构包括 VGG、ResNet、或者用于图像配准的特定架构。 3. 匹配:在每个视角中,将图像特征与其他视角中的特征进行匹配,以找到对应的特征点。这可以通过计算特征之间的相似度,例如使用光流法或者局部特征描述子。 4. 深度估计:使用匹配的图像特征来估计每个像素点的深度值。这可以通过训练一个深度估计网络,将图像中每个像素处的特征输入网络,预测其深度值。 5. 高级优化:对估计的深度图进行后处理和优化,以提高重建结果的精度和稳定性。这可以包括平滑滤波、边缘保持、去除噪声等技术。 总体而言,深度学习在MVS中的应用可以显著提高重建的精度和效率,但也需要大量的训练数据和计算资源来实现。在实际应用中,还需要考虑场景复杂性、纹理信息和光照变化等因素,以获取更准确的三维重建结果。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值