英伟达展示了一种惊人的新人工智能算法,可以自动将一些照片转换成逼真的 3D 场景。
该算法基于深度学习神经网络,只需 3 个镜头即可创建 12D 场景,并在短短几秒钟内完成渲染。结果虽然远非完美,但却令人惊叹:并展示了未来在视频编辑和面部、人物或风景渲染等领域的应用前景。
Nvidia 发布了一段视频,演示了该算法的实际应用 - 请亲自观看。
Instant NERF,Nvidia 的 3D“魔法”。
Nvidia 开发的工具被称为 Instant NERF,源自“神经辐射场”,这是一项由谷歌研究院和加州大学圣地亚哥分校于 2020 年推出的技术。
如果你真的想知道更多 看看这里 (英文文本)。 另一方面,如果您对我的理解感到满意:本质上,该技术将来自一些 2D 图像的颜色和光强度数据结合起来,以产生 3D 场景。 事实上,除了照片之外,系统还需要有关相机位置的信息。
几年来,研究人员一直致力于将此类模型从 2D 改进为 3D,增加了渲染的复杂性,同时缩短了周转时间。事实上,Nvidia 声称其使用 Instant NeRF 的新渲染方法可能是有史以来最快的:该过程从需要几分钟到几乎立即完成。
可能的应用领域
英伟达在一篇博文中表示,随着这项技术变得更快、更容易实施,它可以用于所有类型的企业。 描述工作.
Instant NeRF 可用于为虚拟世界生成化身或环境,以 3D 形式捕捉视频会议参与者及其周围环境,或重新创建 3D 数字地图的设置,根据 伊莎萨利安 由英伟达。
该技术可用于教导机器人和自动驾驶汽车如何通过拍摄 2D 照片或视频来识别现实世界物体的大小和形状。它在建筑和娱乐方面也非常有用。它将帮助初创公司(包括意大利的初创公司, 喜欢这个) 以创建更快的真实环境数字表示,创作者可以在瞬间修改和开发。