计算机视觉/视频分析

《时代》杂志将 NVIDIA Instant NeRF 评为 2022 年最佳发明

时代杂志将 NVIDIA 命名为 Instant NeRF ,这是一种能够将 2D 图像转换为 3D 场景的技术,也是 2022 年最佳发明 之一。

“在 NVIDIA Instant NeRF 之前,创建 3D 场景需要专门的设备、专业知识以及大量的时间和金钱。现在只需要几张照片和几分钟,”《时代周刊》在其发布中写道。

3D 渲染工具在 2022 年 SIGGRAPH 2022 上推出,这是世界上最大的计算机图形和交互技术会议。

在 SIGGRAPH 上, NVIDIA 研究人员托马斯·穆勒、亚历克斯·埃文斯、克里斯托夫·席德和亚历山大·凯勒提交了他们的论文 Instant Neural Graphics Primitives with a Multiresolution Hash Encoding 。这项创新研究很快受到欢迎,赢得了 SIGGRAPH 20 2 2 Technical Papers Award

Instant NeRF GitHub 页面上累积了数万次下载,获得了超过 9700 颗星的成绩,开发人员和 3D 内容创作者正在接受使用该工具创建令人惊叹的 3D 场景的能力。

什么是 NeRF ?

神经辐射场( NeRF )是能够从一组 2D 图像生成 3D 图像或场景的神经网络。使用空间位置和体积渲染,模型使用图像中的相机姿势来渲染场景的 3D 空间。

NeRFs 的计算量很大,历史上渲染需要很多小时。然而, Instant NeRFs 为用户提供了用少量图像快速、准确地渲染图像或场景的能力。可以在几秒钟内生成场景,模型训练时间越长,渲染的场景细节越多。

视频 1.使用 Instant NeRF 创建的 Amalfi 海岸。资料来源:乔纳森·斯蒂芬斯

探索 NeRF

为了支持采用 Instant NeRF 的开发人员, NVIDIA 在夏天举办了一场 Instant NeRF Sweepstakes 。该活动鼓励参赛者在使用 InstantNeRF 的同时探索自己的创造力,并有机会得 GeForce RTX 3090 。 Twitter 上的抽奖人数超过 270 万。

自代码发布以来,从人工智能研究人员到摄影师等众多创作者通过制作自己的 NeRF 展示了他们的即时 NGP 技能。

“ NeRF 是一种定格时间瞬间的方式,比照片或视频更具沉浸感。它是一种再现瞬间——整个瞬间的方式。 NeRF 是摄影测量的自然延伸,也是现代摄影的发展,” NeRF 技术的早期探索者 Franc Lucent 的 Michael Rubloff 说。

视频 2.宙斯的 NERF 。来源: Hugues Bruy è re

总部位于蒙特利尔的创意工作室 Dpt 的合伙人兼创新总监 Hugues Bruy è re 表示:“博物馆是互动式和沉浸式体验的绝佳探索领域。像这样的立体场景也可以通过现代和沉浸式的方式直接促进历史遗产保护。”。

社区通过这种新的摄影形式表达自己和他们的艺术,将 NeRF 带到了另一个层面。一些人甚至找到了使 NeRFs 在工作方式上具有影响力的方法。

视频 3.一位女性冥想的 NeRF 场景。信贷: Franc Lucent

制作自己的 NeRF

这项非凡的技术可供任何人试用!

查看 Getting Started with Instant NeRF post ,了解如何设置代码并创建第一个 NeRF 。或者直接跳到代码,通过访问 NV Labs Instant NeRF GitHub 自行尝试。

也可以 see how various artists & professionals have used Instant NeRF in their projects

视频 4.使用 NeRF 扫描镜面。图片来源: Karen X.Cheng 和 James Perlman

特色图片:普渡工程喷泉。资料来源:乔纳森·斯蒂芬斯

Tags