Arm发布Neural Super Sampling AI超采样技术

1 天前·来源:Hugging Face Blog
ArmAI超采样神经渲染移动图形虚幻引擎

Arm公司发布了Neural Super Sampling下一代AI超采样解决方案。该技术专为移动设备实时性能设计,可将低分辨率渲染提升至高分辨率。NSS已集成到虚幻引擎,供开发者开始实验。

Arm公司发布了Neural Super Sampling下一代AI超采样解决方案,供图形和游戏开发者开始实验。NSS专为未来移动设备的实时性能设计,基于Arm Neural Technology。在演示中,NSS将GPU工作负载减少了50%,模型以540p渲染并在4毫秒内超采样至1080p。

Neural Super Sampling是Arm开发的实时时间超采样参数预测模型,针对移动GPU中的神经加速器优化执行。它通过从低分辨率时间输入重建高质量输出帧,以较低计算成本实现高分辨率渲染。NSS特别适用于移动游戏、XR和其他功耗受限的图形应用场景。

NSS已通过两个插件集成到虚幻引擎中:NSS Plugin for Unreal Engine和Unreal NNE Plugin for ML extensions for Vulkan。Arm提供了快速入门指南,包括ML extensions for Vulkan Quickstart Guide和Neural Super Sampling Quickstart Guide。

Arm发布了Neural Graphics Dataset,包含参考图像和图像序列以及训练、验证和测试神经超采样算法所需的运动、深度等数据。当前版本数据集包含有限数据用于演示NSS模型开发流程。Arm未来将发布Neural Graphics Model Gym,提供工具捕获和转换内容用于模型训练和再训练。

背景阅读

Neural Super Sampling是AI在图形渲染领域的最新应用,属于神经渲染技术范畴。传统超采样技术如NVIDIA的DLSS和AMD的FSR已证明AI在提升图形性能方面的潜力,主要通过深度学习模型将低分辨率图像重建为高分辨率输出,减少GPU计算负担。Arm作为移动芯片架构的主要提供商,此次发布NSS标志着AI超采样技术向移动设备扩展,针对功耗敏感的移动环境优化。该技术基于Arm Neural Technology,专为移动GPU中的神经加速器设计,与桌面GPU的AI超采样方案形成差异化竞争。神经渲染技术近年来快速发展,从最初的图像超分辨率扩展到实时图形渲染、光线追踪加速等领域,成为游戏和XR应用性能提升的关键技术。Arm的NSS发布进一步丰富了AI在图形处理领域的应用生态,为移动开发者提供了新的工具选择。

评论 (0)

登录后参与评论

加载评论中...