这段文字介绍了一项新的 AI 研究论文,该论文可以生成逼真的增强现实效果,例如将视频中的天空替换成任何你想要的图像。该 AI 能够自动进行运动估计、天空抠图、天空盒创建和重新照明,从而使创建创意作品的速度大大提高。
该 AI 能够将天空替换成任何图像,并通过运动跟踪将其固定在背景中,使其看起来像是真实的天空。虽然该 AI 能够在几秒钟内处理大量视频帧,但它目前只针对白天天空进行了训练,因此在处理其他图像时可能会出现一些问题,例如抠图边缘出现光斑或远处的山脉被处理成半透明。
虽然该 AI 目前无法直接导出到其他视频编辑格式,但它仍然可以用于创造各种有趣的增强现实效果,例如将飞机窗外的景色替换成其他场景。
作者还感谢赞助商 Infinite Red 和 Patreon 支持者,并邀请观众加入他的 Discord 频道分享作品和交流经验。
用 SkyAR 随心所欲地替换天空!任何有天空的东西都可以轻松地替换成你选择的任何背景图片或视频。SkyAR GitHub:https://github.com/jiupinjia/SkyARSkyAR 安装教程:https://youtu.be/Iqc7TwbExmE