人工智能/深度学习

AI 超分辨率技术将于今年下半年推出

2019 年,随着 2019 LTS(长期支持版)的发布,Unity 面向其所有开发者推出实时光线追踪。2021 年年底之前,Unity 2021.2 将为 HDRP(高清渲染管线)提供 NVIDIA DLSS(深度学习超级采样)原生支持。在照常仅渲染一小部分像素的情况下,NVIDIA DLSS 可通过高级 AI 渲染生成媲美原生分辨率的画质,有时甚至更加出色。借助实时光线追踪和 NVIDIA DLSS,Unity 开发者将能打造出精美的实时光线追踪世界,而这些均能在 NVIDIA RTX GPU 上以较高帧率和分辨率运行。DLSS 还大幅提升了传统光栅化图形的性能。

尽管相比光栅化技术,光线追踪所生成的图像要逼真得多,但光线追踪需要大量计算,这会导致帧率较低。NVIDIA 的解决方案是减少光线追踪的像素,并在专门的 Tensor Core 单元上应用 AI 技术,从而以智能方式扩展至较高分辨率,同时大幅提升帧率。我们搭建了一台超级计算机,利用包含各种内容的超优质 16K 离线渲染图像来训练 DLSS 深度神经网络。经过训练,该模型可以集成到核心 DLSS 库或游戏本身,甚至可供 NVIDIA Game Ready 驱动程序下载。

在运行时,DLSS 采用三个输入:1) 低分辨率且未经过抗锯齿的图像,2) 当前帧的运动向量,3) 高分辨率的上一帧。利用这些输入,DLSS 可组合出一张美观清晰的高分辨率图像,然后将后处理特效和用户界面/抬头显示应用于其上。您还能获得性能优化空间,可以按需增加光线追踪设置并提高输出分辨率。

2021 年 GPU 技术大会上,Light Brick Studio 在同时开启实时光线追踪和 DLSS 的情况下,展现了 Unity 游戏令人震撼的潜在魅力。点击此处免费观看完整演讲。

您可以订阅 NVIDIA 游戏开发新闻,关注 Unity 技术博客,以便随时了解有关 Unity 2021.2 中 DLSS 的更多新闻。

 

Tags