第二代骁龙8追光狠角色尝鲜认知AI

作者：admin更新时间 2024年5月24日2024年5月24日

没等进入12月，高通就带着2022年最新旗舰移动平台第二代骁龙8来了。

搭载第二代骁龙8的商用终端预计也将在今年底就面市，除了小米表示将率先搭载第二代骁龙8，vivo、OPPO、moto、魅族都表示是首批搭载。

关于第二代骁龙8，先介绍几个关键信息，采用台积电4nm工艺，CPU用上新的1+2+2+3设计， Kryo CPU性能提升35%，能效提升40%；Adreno 740 GPU性能提升25%，能效提升45%。

但更重要的是，今年骁龙旗舰平台有两个非常值得关注的重要升级。

一个就是没有任何预告，亮相就已经是接近商用级别的移动端硬件光线追踪GPU Adreno 740，第二代骁龙8搭载的移动光线追踪GPU的功耗低于5W，是业界首个功耗低于5W的光线追踪GPU，可谓光线追踪领域最狠的角色。

另一个就是性能和能效同时大幅提升的高通AI引擎，更大的张量加速器带来高达4.35倍的AI性能提升，在足够强大的AI算力和能效下，ISP能够摇身一变升级为认知ISP（Cognitive-ISP），计算摄影有了往前迈一大步的机会，手机的AI感知也将从二维升级为三维。

当然，更强的5G、Wi-Fi7连接，以及进一步升级的蓝牙音频、安全技术也都是第二代骁龙8的亮点。

全球最低功耗光线追踪GPU，亮相就接近商用

2018年，英伟达图灵架构RTX30系列发布，将光线追踪这个硬件门槛很高的技术第一次带入普通游戏玩家视野。2022年，移动端也进入光线追踪的时代。

虽然天玑9200赶在第二代骁龙8之前发布，但天玑9200的光线追踪技术能提供给消费者的时间并没有明确。

高通技术公司产品市场资深经理PJ Jacobowitz在第二代骁龙8发布会上表示，“我们与网易雷火工作室独家合作了热门游戏《逆水寒》手游，完美实现了光追技术。支持基于光追的出色图形的全新游戏版本将于2023年初在搭载骁龙移动平台的终端上推出。”

雷峰网(公众号：雷峰网)了解到，《逆水寒》的研发投入已经超过7亿元，手游版《逆水寒》已经完成了大部分的研发工作，预计在2023年推向市场，具体发行时间也要看游戏版号。同样来自网易的《天谕》手游可能是普通玩家可以体验到的首款基于第二代骁龙8的光线追踪游戏。

《天谕》光线追踪手游是高通、网易游戏和iQOO的合作。基于第二代骁龙8的硬件实时光线追踪能力，配合iQOO自研Falcon图形引擎和AI算法，能够真实还原阴影、光线、材质等游戏画面中的关键细节。

为什么光线追踪在移动端是一个重大的技术技术进步？直接通过对比图先来直观感受。

在《逆水寒》极富武侠情调的演示场景中，不开启光追效果时能表现出水面的波光、涟漪，并微弱地映射出水面上的其他物体，但无法达到全反射的镜面效果。

在开启实时光追效果后，游戏引擎可以按照真实的光线反射规律渲染画面，侠客、竹林、天空被清晰地倒映在水面中，色彩真实绚烂，画面层次感清晰。

有了光线追踪，甚至是瓷器、陶片这种光洁表面也都能够呈现不同反射率的逼真光影反射效果。

网易高级总监、逆水寒手游制作人邹珈璇指出：“光追是通过对每根光线做传播上的追踪来实现渲染效果的技术。通过光追能够得到最接近真实世界的光影效果。但是由于这项技术需要极大的算力支持，必须从硬件层面做深度的支持。”

支持硬件光线追踪的第二代骁龙8的高通Adreno GPU性能相比第一代骁龙8提25%，每秒能够处理数百亿次光线相交，还率先支持基于移动端优化的虚幻引擎5 Metahuman框架。另外，第二代骁龙8的Snapdragon Elite Gaming特性支持包括对全新Vulkan1.3 API的支持。

雷峰网了解到，支持全新的Vulkan1.3 API非常关键，因为Vulkan1.3才加入了对光线追踪的支持，第二代骁龙8的Vulkan的性能也有30%的提升。

相比硬件性能的提升和对标准和框架的支持，构建光线追踪的生态的挑战更大。

高通目前已经与产业链上的多个合作伙伴进行合作，除了上面提到的游戏提供商网易，虚幻引擎，手机OEM也是高通光线追踪的重要合作伙伴。

为了模拟真实的游戏场景，OPPO基于自研移动光追管线打造了一款可以媲美当前主流射击类游戏场景——营地守卫。

据悉，营地守卫拥有超过2000组物体模型，多达80万个三角面，以及接近100种不同的材质纹理数量，基于这一模拟场景，OPPO和高通在游戏场景中进行了驱动测试、着色器优化和编译器工具开发，双方也优化了物光引擎，保证物光引擎2.0可以在第二代骁龙8 移动平台最高效地运行，确保画质提升的同时，兼顾能耗的问题。

通过OPPO和高通大量和工作和合作，实现了在搭载第二代骁龙8移动平台的实机运行中，室温环境下，营地守卫可以在 720P的画质下稳定在60帧率，并且无卡顿流畅运行长达30分钟。

效果也非常让人惊喜，在运动的过程中，所有光线的变化都可以流畅运行，阴影随着画面移动产生角度变化，人物和建筑也会随着视角的转变带来自然的光影流转。

据悉，OPPO与高通合作的移动光追解决方案会在即将发布的一加11上首发搭载，也会在OPPO其他旗舰手机上陆续落地。

同时，OPPO推出的业界首个开源移动光追解决方案PhysRay SDK，可以无缝集成到主流引擎使用的栅格化管线中，适应不同的场景风格和复杂性，并提供一个均衡的解决方案，这对于推动移动端光线追踪的进步也有积极意义。

AI性能能效齐升，一次大胆的尝试

与光线追踪带来的提升能够轻松感知到类似，AI性能和能效提升带来的包括认知ISP的功能，更好支持Transformer也可以带来体现的显著提升。

高通技术公司高级副总裁兼手机业务总经理Christopher Patrick介绍，第二代骁龙8的高通Hexagon处理器进行了重大升级，张量加速器尺寸翻倍，自然语言处理性能提升超过4倍，能效提60%。

性能提升，能耗降低，更向前一步就可以让手机的二维感知升级为三维，比如认知ISP。

认知ISP与AI ISP的不同点在于，AI ISP依旧是处理二维的信息，认知ISP可以增加一个新的维度，比如增加时间的维度，让手机从时间维度更好去理解和处理信息。

实际上，认知ISP是通过一个名为“Hexagon直连”的物理连接，将Hexagon处理器和Qualcomm Spectra ISP之间直连，更好地利用存储和计算资源，让摄像头在情境中感知人脸、头发、衣服等，进行独立优化，从而让每个细节获得定制的专业图像调优。

“认知ISP是AI摄影和摄像技术的一大突破。”高通技术公司产品管理副总裁Judd Heape就说，“认知ISP可以实时运行被称为‘语义分割’的AI照片编辑技术。这一神经网络经过训练可以识别多种不同物体，比如人物、面部、天空和草地等，将自定义编辑应用于场景中的不同元素，实现柔化皮肤、锐化草地、打造纯净的蓝天等效果。就像一个‘Photoshop图层’，但整个修图过程都在ISP里完成。”

认知ISP的升级如果匹配上高通与索尼合作的四曝光数字重叠（DOL）HDR技术，首个面向第二代骁龙8优化的2亿像素图像传感器三星ISOCELL HP3，无疑会将移动拍照带向新的高度。

高通AI引擎的升级中还有非常关键的一点——率先支持INT4 AI精度格式。

高通技术公司产品管理副总裁Ziad Asghar指出，“与INT8相比，INT4将带来60%的能效提升和90%的AI推理性能提升。具体来看，从32位浮点运算到4位整数运算，我们将能耗降低了惊人的64倍。”

“能够实现这一切并确保不降低准确度，我们依靠的是AI Studio。”Ziad Asghar同时表示。

为了满足不同场景和应用对AI算力和功耗的需求，高通的最新一代AI引擎还有三个非常关键的升级，包括专用的供电系统，能够提高供电效率；还有内存读/写的改进，尽量减少对外部数据的读写，降低能耗；还通过微切片推理的方式，目标是提高AI计算的高效率。

还有一个重要的改变，最新的高通传感器中枢集成了两个AI处理器，支持直观体验，实现自定义唤醒词。

CPU架构的重要变化

骁龙8的CPU架构从第一代的一个3GHz的Cortex-X2性能超大核、三个Cortex-A710大核和四个Cortex-A510小核，“1+3+4”的架构设计，变为了今年第二代的1个3.2GHz的Cortex-X3性能超大核、4个2.8GHz的性能内核（2个Cortex-A715 ，2个Cortex-A710）、3个2.0GHz的Cortex A510效率内核的“1+4+3”的设计。