隐式神经表示

以图像为例,其最常见的表示方式为二维空间上的离散像素点。但是,在真实世界中,我们看到的世界可以认为是连续的。于是,可以考虑使用一个连续函数来表示图像的真实状态,然而我们无从得知这个连续函数的准确形式,因此有人提出用神经网络来逼近这个连续函数,这种表示方法被称为“隐式神经表示“ (Implicit Neural Representation,INR),是一种对各种信号进行参数化的方法。

传统的信号表示通常是离散的,而隐式神经表示将信号参数化为一个连续函数,将信号的域映射到该坐标上的属性的值(例如对于图像,就是将像素坐标映射到R,G,B颜色)。
之前介绍的Deep SDF NerF都是基于隐式神经表示

应用

1、新视角合成
RGB图像的动态场景或者已知相机位姿等参数的一组图像作为输入,创建一个几何和外观的隐式神经表示,通过点坐标和视角方向得到RGB颜色以及体密度,即可推测新视角的图像
2、三维重建
RGB图像作为输入,创建隐式神经网络,输入坐标以及特征向量,输出占有概率,通过设置阈值(水平集)推测得到重建模型的占有域,比如Deep SDF中输出值为零的点集合作为物体表面得到三维模型。
目前网络结构大多使用基于ReLuc的多层感知器MLP(全连接网络)

  • 0
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 2
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值