Nvidia 的最新图形研究几乎可以立即将图像从 2D 转换为 3D

Instant NeRF 可用于为虚拟世界创建头像或场景，以 3D 形式捕获视频会议参与者及其环境，或为 3D 数字地图重建场景。

元宇宙现在正在形成，Nvidia 已经全力以赴，引入了一套强大的工具来构建它。但即使对于像 Nvidia 这样的图形先驱来说，渲染 3D 世界也是一项复杂的技术挑战。 

在本周的春季图形技术大会 （GTC） 上，Nvidia 展示了一种新的逆向渲染方法，即从少量 2D 图像中重建 3D 场景的过程。反向渲染使用 AI 来近似光线在现实世界中的行为方式。使用 Nvidia Research 团队开发的方法，整个过程几乎立即发生。 

Nvidia 解释说，这种方法可以应用于广泛的用例。它可用于为虚拟世界创建头像或场景，以 3D 形式捕获视频会议参与者及其环境，或为 3D 数字地图重建场景。 

使用传统方法创建 3D 场景可能需要数小时或更长时间，具体取决于可视化的复杂程度和分辨率。一种称为神经辐射场 （NeRF） 的流行新技术使用 AI 来加快这一过程。NeRF 使用神经网络根据 2D 图像的输入集合来表示和渲染逼真的 3D 场景。NeRF 通过预测从 3D 空间中的任何点向任何方向辐射的光的颜色，有效地训练小型神经网络来填补空白。 

早期的 NeRF 模型可以在几分钟内生成高质量的渲染，但需要数小时才能进行训练。Nvidia Research 开发了所谓的 Instant NeRF，将快速神经网络训练与快速渲染相结合。Nvidia 表示，这是迄今为止最快的 NeRF 技术，在某些情况下可实现超过 1000 倍的加速。 

为了开发 Instant NeRF，Nvidia 提出了一种新的输入编码方法，称为多分辨率哈希网格编码。它经过优化，可在 Nvidia GPU 上高效运行。

“Instant NeRF 对 3D 的重要性可能与数码相机一样重要，而 JPEG 压缩对 2D 摄影的影响——大大提高了 3D 捕获和共享的速度、易用性和范围，”Nvidia 图形研究副总裁 David Luebke 在一份声明中说。