XVerse为虚幻引擎5.3提供了一个免费的3DGS插件,它宣布推出他们的本地训练工具包XV3DTools。该工具包支持从视频中一键训练3DGS模型,以便在虚幻引擎5中使用。
下载要求最低,尽管它目前仅与 Windows 兼容并且至少需要 CUDA 11。
Github:https://github.com/xverse-engine/XV3DGS-UEPlugin/releases
这次最重要的功能是能够在虚幻引擎中将视频本地训练到3DGS中。它们指定它输入 .mp4s 进行训练。虽然它可能不是最快的教练,但他们目前正在 2080 上训练。正如你所想象的那样,XV3DTools与他们的插件完全兼容,同样带有Apache 2.0许可证,可以在UE 5.3中使用。
虽然他们指定训练平台适用于视频,但我想您将能够使用 ffmpeg 将一组图像拼接到视频中,然后只需将视频使用的总帧数对齐。他们的插件可以从他们在 Github 上的发布中下载,XV3DTools 可以在这里下载。
说到XV3DGS-UEPlugin,他们还发布了更新版本v1.1,增强了UE中3DGS的基础渲染功能。新功能包括自动生成LOD,支持尼亚加拉超过200,000个点云。