计算机图形技术前沿争夺战:AI成为攻防中心
在游戏、专业设计等消费级图形应用中,随着显示分辨率增长,图形精细度提高,对于计算机图形计算单元(GPU)的计算能力需求正在高速增长,如何应对两者之间的矛盾,成为主要图形技术公司的研究课题。
?
借助人工智能技术缓解这一矛盾,成为主要图形领域相关公司的主流方向。自2019年起,英伟达推出名为DLSS(深度学习超级采样)技术,利用深度学习将较低分辨率的图像缩放为更高分辨率的图像,以便在更高分辨率的计算机显示器上显示。随后,微软、英特尔、联发科等公司纷纷推进,“人工智能”在消费级图形技术领域,尤其是游戏用途中,得以大显身手。
?
英伟达是用“人工智能”技术改善图形渲染显示的先锋。在硬件上,英伟达在其RTX20与30系列GPU内置专用AI计算单元TensorCore,就有加速DLSS的职能。经过3年发展,DLSS已经逐步成熟。
?
2020年年英伟达将DLSS升级到2.0版本,成为DLSS被市场接受的重大更新,其工作方式大致上为:英伟达用超级计算机对游戏超高分辨率的画面和输出的低分辨率画面映射做训练(training),输入包括了运动向量等数据,应用于高分辨率画面可以预测下一帧画面。其后,训练得到的AI模型通过驱动和升级推送到用户端。而在用户端,在开启DLSS特性的游戏里,GPU就应用训练模型,进行推理(inference),实现低分辨率画面拉伸到高分辨率的操作。
?
在近日推出的DLSS技术最新2.3版本中,英伟达还称,新的AI算法可以更智能地利用运动矢量来改善运动物体的渲染表现,同时还改善了重影、时间稳定性等,比如此前用户反馈比较多的细小物体拖影问题,是英伟达比较重要的一词技术更新。
?
DLSS与英伟达力推的实时光线追踪技术一同,成为新一代图形领域的重要技术支撑。原因在于实时光线追踪对GPU硬件资源仍有着相当贪婪的需求,如当GPU以4K分辨率、开启光线追踪运行时,计算压力巨大,配套的DLSS能缓解硬件资源方面的压力。
?
此外,测试显示,DLSS处理的画面,与原生分辨率几乎没有差别,在某些地方甚至还能做到更好。因此,对于画面每秒帧数(FPS)有更高的要求的VR游戏,DLSS能带来更好的体验改善,有助于VR技术的普及。win11激活密钥
?
将低分辨率拉伸到高分辨率,业界通常称为“游戏超分”,能在一定程度上在硬件瓶颈下改善游戏画质,此前在游戏机上颇为常用。在英伟达推出DLSS后,AMD也在PC平台推出了FSR(FidelityFXSuperResolution,超级分辨率锐画技术)技术应对,但FSR技术事实上并未应用AI。
?
尽管FSR应用范围更大,但在技术选择上,业界更倾向于英伟达的AI路线。原因在于借助AI学习方式,是自渲染方式到输出进行连贯的图像处理与强化,与将完成后的影像套用固定方式进行放大与锐化仍有明显技术优势。不过,英伟称近期称其在游戏超分领域提供全栈技术方案,提供玩家包括DLSS到NIS(英伟达图像缩放,与AMDFSR方案类似)的技术方案选择,通过驱动更新形式向玩家升级。windows7激活密钥
?
在移动市场,借助AI改善游戏画面成为移动厂商关注的问题。“我们也认同游戏市场有这样的需求。我们未来会布局游戏超分,在移动平台端的完整方案。目标上和英伟达一致,满足游戏开发者在性能和画质上的要求,芯片平台的性能、功耗也达到整体平衡。”在近日举行的一场媒体技术沟通会上,联发科相关人士称。win10激活
?
根据联发科介绍,其在游戏超分的方案与英伟达颇为类似。“我们第一代游戏超分的规划方案,希望是结合GPU+APU的异构方案。在移动平台端,我们希望让GPU专心做渲染,APU(AI处理器)则可以负担一部分超分的系统需求。”
?
在今年正式公布了名为“锐炫”(Arc)的全新显卡品牌,确认重新返回独立显卡市场的英特尔,也在其近年的架构日中,公布了与DLSS类似的XeSS(XeSuperSampling)超分辨率技术,英特尔大致解释称,XeSS原理是通过画面中的临近像素,以及过去帧进行运动补偿,来重建子像素细节,该过程需要通过神经网络进行。英特尔在此前的技术分享中也演示了1080P“超分”到4K画面,与原生4K分辨率渲染的比较,效果看起来还不错。win10专业版激活密钥
?
在此拓展较早的英伟达一直在围绕DLSS构建生态系统,至今超过100款游戏得到应用,获得虚幻、Unity等主流游戏引擎应用。英伟达称,该技术非常容易集成在游戏中。英伟达称,在今年第三季DLSS已取得45款以上游戏及程序的支持,较第二季及第一季出现爆发性的增长。
?
尤其是近年来,由于英伟达在中国投入力度加大,如新近上市的《光明记忆:无限》《仙剑奇侠传7》《暗影火炬城》等国产游戏。有中国开发者表示,英伟达在国内会对合作厂商提供专门的技术支持,解决游戏的适配和兼容等问题。
?
值得注意的是,英特尔也计划把XeSS推到英特尔以外,包括英伟达、AMD两个竞争对手的产品。英特尔称,XeSS在包括集成显卡在内的各种硬件上提供基于AI的超级采样,这会将XeSS带给数以百万计的游戏玩家,目前已经有多家早期的游戏开发商已经开始采用XeSS。
?
未来在光线追踪之外,基于AI的超分辨率技术也将成为GPU厂商的技术必争之地,在生态搭建、算法优化和平台支持上展开争夺。