概述

利用 Arm 神经网络技术,在手持设备上实现实时影院体验

AI Summary

多年来,游戏工作室为了提高玩家留存率,不得不在电影级视觉效果、流畅性能和移动端能效之间做出取舍。Arm 神经网络技术改变了这一局面。此项技术是业界首套 AI 加速渲染技术,通过 Arm CSS for Mobile 将专用的 AI 驱动神经加速器引入 Arm Mali GPU。

 

Arm 神经网络技术通常应用于高端主机和桌面游戏,现将动态光照、光线追踪效果和下一代视觉保真度引入手持设备,同时显著降低 GPU 工作负载、功耗和发热量。

 

 
“神经图形技术为下一代手游的开发模式开辟了全新可能。我们正与 Arm 合作,将 Arm 神经网络技术集成至 MagicDawn,并基于《暗区突围:无限》联合打造神经超级采样与降噪技术演示样本。通过把技术创新与游戏引擎、开发者以及真实游戏内容相结合,我们致力于构建一套生态系统,让移动端玩家能够大规模体验更先进的图形效果。”
Nathan Chen, 腾讯游戏技术负责人
优势

光照成为丰富游戏玩法的元素

每个发光的表面都表示可交互,引导玩家进入实时渲染的丰富、动态环境。《光影新生》是一个实际案例,展示了 Arm 神经网络技术如何帮助开发者探索提升未来移动设备视觉质量、性能和能效的新方法。

三项技术,移动图形技术的巨大飞跃

神经超级采样 (NSS)、神经超级采样与降噪 (NSSD) 和神经帧率提升 (NFRU) 协同工作,首次在移动设备上实现了高级光照和光线追踪。

 

Arm 神经网络技术通过重建高分辨率图像、减少光线追踪噪声并实时生成中间帧,在下一代 Arm 平台上实现了更流畅的游戏体验、更丰富的视觉效果和更高保真度的体验。

游戏工作室必备。专为沉浸式游戏体验打造。

为游戏工作室提供了高效工具,助力加快迭代速度、减少对烘焙光照管线的依赖,并以更精简的制作周期打造电影级画质,从而提高玩家留存率和游戏时长。

 

玩家可在手持设备上享受更流畅的游戏体验、更长的游戏时间和更沉浸的游戏世界,而无需牺牲手游所需的能效。

赋能下一代高端移动设备

对于 OEM 厂商和芯片合作伙伴而言,Arm 神经网络技术能够实现高端游戏差异化、AI 辅助图形功能,提供针对基于 Arm 架构的平台而优化的下一代渲染体验。

 

最新的 Arm Mali G2-Ultra NX GPU 将专用神经加速器集成到 GPU 中,为神经图形增加了专门的加速功能。神经网络技术有助于展现先进的 GPU 功能,同时在实际的散热和电池限制内支持沉浸式手游体验。

 

通过在手持设备上实现先进的实时图形工作流,神经网络技术有助于为未来的移动平台提供更高性能的游戏体验和 AI 驱动的图形创新。

光影新生

《光影新生》:首款采用 Arm 神经网络技术和虚幻引擎 MegaLights 打造的手游

《光影新生》由 Sumo Digital 开发,代表了 Arm 首款完全可玩的高品质手游。通过使用 NSSD 和 NFRU,Sumo Digital 释放了足够的性能预算,首次在移动设备上启用光线追踪和虚幻引擎的 MegaLights,从而创造了具有电影级画质、引人入胜的游戏体验。

 

Arm 神经网络技术采用即将面向生态系统推出的相同工具和工作流进行开发,使开发者能够抢先一步,针对今年晚些时候推出的下一代基于 Arm 架构的设备,提前开始构建。

 
开始构建

使用 Arm 神经图形开发套件开始构建

开发者现在就能通过我们的开发套件来尝试使用 Arm 神经网络技术,套件中包含虚幻引擎插件、示例代码、预训练模型、Vulkan ML 扩展和集成指南。

神经图形开发套件

常见问题解答

Arm 神经网络技术是什么?

Arm 神经网络技术是一套 AI 加速渲染技术,旨在为手游设备带来实时光照、光线追踪和桌面级视觉保真度,同时在移动设备的散热和功耗限制内运行。

它结合了神经放大、降噪和帧生成技术,以提高下一代 Arm 平台上的图形质量和游戏性能。

Arm 神经网络技术如何提升手游体验?

Arm 神经网络技术通过实现先进的实时光照、光线追踪效果、更流畅的帧速率和更高的图像质量来改善手游体验,而无需消耗过多的移动设备电量。

上述能力使开发者能够在保持实用电池续航时间和散热效率的同时,提供更具沉浸感的手游体验。

神经超级采样、神经超级采样与去噪和神经帧率提升分别是什么?

神经网络技术包含三项核心 AI 渲染技术:

  • 神经超级采样 (NSS):基于 AI 的图像重建技术,能够提高低分辨率渲染图像的视觉质量。
  • 神经超级采样与降噪 (NSSD):AI 增强的去噪功能,带来更清晰的光线追踪光照和反射效果。
  • 神经帧率提升 (NFRU):AI 生成的中间帧可提高玩家感知的帧率和游戏流畅度。
  • 上述技术共同作用,使得在手持设备上实现先进的移动光线追踪成为可能。

《光影新生》是什么?

《光影新生》是由 Arm 和 Sumo Digital 开发的完全可玩的高品质手游原型,旨在演示 Arm 神经网络技术在移动设备上的实时运行效果。

它展示了虚幻引擎 MegaLights、动态光照和先进的渲染工作流在手持硬件上的实时运行效果。

Arm Mali G2-Ultra NX 是什么?

Arm Mali G2-Ultra NX 是一款专为神经图形设计的 AI 原生 Mali GPU。它集成了神经加速器(NX,一种新的执行引擎),并改进了光线追踪技术,以支持 AI 加速移动图形。

Arm 神经网络技术是否支持虚幻引擎?

支持。开发者可通过 Arm 神经图形开发套件访问虚幻引擎插件和集成工具。

套件中包含示例代码、Vulkan ML 扩展、预训练模型和集成资源,用于试验神经图形工作流。

为什么神经渲染对手游工作室如此重要?

神经渲染技术可帮助手游工作室实现更高的视觉保真度,同时减少对传统烘焙光照工作流的依赖。 此项技术可助力加快迭代周期,简化素材制作,并在移动平台上实现更具电影级画质的实时游戏体验。

神经网络技术能为 OEM 厂商和芯片合作伙伴带来哪些好处?

对于 OEM 厂商和芯片合作伙伴而言,神经网络技术可实现高端游戏差异化、先进的 AI 图形功能,提供针对基于 Arm 架构的移动设备而优化的下一代游戏体验。

此项技术还有助于展示 AI 加速 GPU 和下一代移动硬件平台的功能。

神经网络技术现在是否已经可用?

开发者现在就能通过 Arm 神经图形开发套件和相关的虚幻引擎集成资源,开始尝试使用神经网络技术。随着技术生态系统的扩展,预计将会有更多平台支持、设备上市和生态系统更新。

Arm 神经网络技术如何支持移动端的光线追踪?

Arm 神经网络技术使用 AI 辅助降噪、图像重建和帧生成来降低传统上与光线追踪相关的性能成本。

因而,实时光照和光线追踪效果在移动端的散热和功耗预算范围内变得更加实用。

哪些行业或公司正在使用神经网络技术?

Arm 正在与 Sumo Digital、Enduring Games、网易游戏和腾讯等游戏和开发合作伙伴开展合作,以推进神经图形工作流和下一代手游体验。

Arm 神经图形开发套件是什么?

Arm 神经图形开发套件是一个开发者工具包,为在 Arm 平台上试验神经渲染技术提供资源。 其中包含:

虚幻引擎插件、示例代码、Vulkan ML 扩展、预训练模型、集成指南、神经图形工作流。

为什么 AI 对移动图形的未来至关重要?

AI 技术对移动图形处理的重要性日益凸显,因为 AI 有助于提高渲染效率、图像质量和实时视觉效果,而不会成比例地增加硬件功耗。