计算机视觉与图形学-神经渲染专题-神经体渲染:实时渲染KiloNeRF

(说明:如果您认为下面的文章对您有帮助,请您花费一秒时间点击一下最底部的广告以此来激励本人创作,谢谢!!!)

1、摘要

NeRF通过将神经辐射场拟合到RGB图像,以前所未有的质量合成场景的新视图。然而,NeRF需要查询深层多层感知器(MLP)数百万次,导致渲染时间缓慢,即使在最新的GPU上也是如此。在本文中,作者证明利用数千个微小的MLP而不是一个大的MLP进行实时渲染是可能的。在作者的设置中,每个单独的MLP只需要表示场景的一部分,因此可以使用更小和更快的MLP来评估。通过将这种分而治之的策略与进一步优化相结合,与原始NeRF模型相比,渲染速度提高了三个数量级,而不会产生高存储成本。此外,通过使用teacher-student蒸馏进行训练。作者证明,这种加速可以在不牺牲视觉质量的情况下实现。

官方链接:https://github.com/creiser/kilonerf

2、系统框架

KiloNeRF作者不是用单个高容量MLP表示整个场景,而是用数千个小MLP表示场景。这使作者能够以2548x以上的速度渲染场景,且不会降低视觉质量。

a4de7202474b3da553459230e3a249ca.png

模型架构,KiloNeRFMLP架构是NeRF架构的缩小版。KiloNeRF的网络只需要原始体系结构的浮点运算的1/87

792199d33ca282e8f5e161ad2d43aee6.png

3、结论

在本文中,作者证明通过将场景空间分解为规则网格并为每个网格单元分配一个小容量网络,可以实现NERF的实时渲染。连同从NeRF继承的其他优势——出色的渲染质量和低存储影响。此外,所提出的加速策略还可以更广泛地应用于依赖于神经函数表示的其他方法,包括隐式曲面模型

更多内容请关注公众号:元宇宙MetaAI

欢迎朋友们投稿,投稿可添加微信:NewYear-2016

  • 1
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值