更强大的AI、“网联计算”,对第二代骁龙8意味着什么?
在刚刚圆满落幕的2022骁龙峰会上,第二代骁龙8移动平台正式登场。
这个性能潜力和能效表现都有明显进步的顶级移动平台,势必会给即将在2022年末发布的旗舰手机带来体验跃升,其赋能的新一轮智能手机竞争,也会比我们之前所预料的更加精彩。
另一方面,在AI技术和体验的双重进化下,第二代骁龙8移动平台构建了网联计算的新标杆,全新时代正在到来。影响智能手机表现的关键因素将不止是通用计算能力,还有针对专用计算需求、专门场景进行设计的诸多细节,“全面且全能”有了全新的定义。
骁龙AI全面变革
在第二代骁龙8移动平台中,AI几乎无处不在,也无时不刻让使用者感受科技的力量。
再度大跨步前进的AI性能
众所周知,骁龙旗舰移动平台已经是市面上AI性能最优秀产品之一,高通也在这些年达成AI产品出货超过20亿个的成就,而第二代骁龙8迈的步子比过去都大。骁龙平台中用于重度AI推理的Hexagon处理器不断扩增体积,这次有了张量加速器增大后,AI性能提升达4.35倍表现。
微切片推理引入使得手机可以用“任务切片”填满算力,更充分地调用计算性能,同时有独立供电设计为可靠和算力保驾护航。INT4将带来60%的能效提升和90%的AI推理性能提升。于是,第二代骁龙8可以实现更强大的AI计算且依然省电。
快、省电而且还很安全
强大起来的不只是处理较重AI任务的Hexagon处理器,高通传感器中枢(Sensing Hub)如今首个拥有了两个AI处理器,低功耗的人脸、眼球实时监测、自定义唤醒词交互或者是快速读取二维码等都不在话下。关键的是,计算数据都不会传出传感器中枢,以此来充分保护用户隐私。
是的,第二代骁龙8同步进化的还有安全能力,安全模块集成SPU还带有独立的内存与存储,能够支持最新的隔离、加密、密钥管理和认证等功能,也可更有效地防范伪造人脸来绕过人脸识别的行为。
软硬结合齐头并进
专用集成电路对于AI计算效率提升相当巨大,不过也需要软件与硬件变革有更好地配合来充分发挥性能,高通就为此带来了AI Stack软件栈——拉通了底层到系统再到顶层的AI框架,支持了TensorFlow等主流AI框架,便于开发者为第二代骁龙8搭配更强大的AI计算功能。
高通AI Studio的潜力也不容小觑,这是拥有图形界面和可视化工具的AI模型开发套件,能充分调用移动平台中CPU、GPU、Hexagon处理器和传感器中枢,几乎以全部潜力来应用AI。高通还强调这些能力支持所有智慧网联终端,可在手机之外的音频、XR、PC、智能座舱等更多场景使用到。
唾手可得的先进功能
在第二代骁龙8上有着更好的Transformer网络计算基础,手机厂商们可以做到更强大的手机端侧功能,不需要连接网络就很好用。小米的端侧小爱翻译相当亮眼,骁龙软硬件支持使得原本在云端服务器上运行的推理模型能快速完整地移植到手机,反应速度和可用性也都相当接近。
即使是离线状态下,用户也能在搭载这款移动平台的小米手机中用到实时字幕、文本图片翻译等功能。因为AI能效提升的缘故,在线时期的双语字幕在变为离线后反而进化成了实时三语字幕,小米就演示了英语内容实时同步翻译成汉语和西班牙语。如此强大的离线版小爱同学,将在2023年内正式推出。
“认知创新”重塑影像技术
来到第二代骁龙8,新一代Spectra ISP又有了新名字——认知ISP。从首个双ISP到CV-ISP到三ISP再到今天的首个认知ISP,骁龙所定义的ISP形象不断发生着变化,而这又与ISP具备的能力紧密相连。从现在起,能够实时将照片和视频拆分成更小的颗粒度,来进行更精准的处理优化。
AI所驱动的实时语义分割,让第二代骁龙8可以在拍摄过程中甚至是按下快门之前,就对手机摄像头采集到的信息产生理解并处理:将整个画面区分出人脸、表情、头发、背景等多个层次的细节,再基于各自更合适的算法同时进行调整,使得影像从整体到局部都能以最佳结果呈现。
高通举了一个藏在细微之处却又能充分呈现实力的例子,实时语义分割不仅能够识别出人脸,还能把五官、头发、皮肤和牙齿更进一步分开处理,手表、包和眼镜这类配饰能够被识别为人体之外的部分,眼镜的反光和眩光则会在“实时P图处理”中被消除,人像拍得更好看了。
5G连接因AI更强大
你没有看错,随着第二代骁龙8携骁龙X70 5G调制解调器及射频系统问世,手机最经典的组成部分基带从现在起也有了AI的力量。5G网络带来了速度巨大提升,但也存在着更高的功耗开销,AI的出现就是要做到更有效率地连接网络,以此来降低使用5G的整体耗电需求。
因此,第二代骁龙8能够给手机带来最大10Gbps的5G网络下载速度,同时能兼顾低时延以及更好的信号和能效表现。还有一个将切实让中国高端智能手机用户感受到的变化,它会成为首个一经发布便支持5G+5G/4G双卡双通的骁龙移动平台,手机使用双卡来接打电话、上网都更方便了。
如你所见,AI已经进入移动平台智能体验的方方面面,不经意间使用到的任一功能都会有AI带来的效率进步。在此之上,更先进AI技术加持下的第二代骁龙8,有望给更多的网联计算带去前所未有的能力,从智能手机扩展到更多场景,这正是高通持续推动创新的领先之处。
旗舰智能手机体验进化
AI与多个部分共同升级,第二代骁龙8成了一个性能更加强大而且能效表现也会很优秀的移动平台,这可以让我们对接下来的高端智能手机体验有相当充分的期待。
省电与强大并驾齐驱
第二代骁龙8有着不太寻常的八核CPU架构:1+4+3组合之下,超大核(超级内核)为最高3.2GHz的1*Cortex-X3,大核(性能内核)为最高2.8GHz的2*Cortex-A715和2*Cortex-A710,小核(效率内核)为最高2.0GHz的3*V2版Cortex-510,八个核心共享8MB三级缓存。
超级内核有了35%的性能提升和40%的能效提升,在完成大型游戏和密集数据处理时会更得心应手。Cortex-A715和Cortex-A710共存,则意味着在这个64位应用已是主流但32位应用仍有需求的时代,第二代骁龙8会有更好的软件兼容性。有实力也有包容,能效表现更值得期待。
谈到性能就不得不说到游戏,这也是普通用户能最显著感受到移动平台有多少改变的场景。新一代Snapdragon Elite Gaming带来了游戏体验变革级别进化,首次支持了最新的Vulkan 1.3图形接口,画面后处理性能提升可高达75%,最震撼的是在骁龙平台首发了硬件实时光线追踪。
光追意味着游戏可以模拟光线射出的轨迹,给玩家呈现更有真实光照效果的游戏画面。PC游戏玩家已领略其中美妙,第二代骁龙8做到的是每秒能够处理数百亿次光线相交计算,这是第一个低于5瓦的实时光追GPU,按高通的话来说便是第二代骁龙8的硬件实时光线追踪“几乎不耗费任何电量”。
在阴影降噪速度比同类移动端的端游级解决方案快4倍及其他技术加持下,移动光追变得近在咫尺。除了高通工作室制作的内容,网易雷火工作室的《逆水寒》手游、手机厂商OPPO和iQOO均带来各自的光追演示,均有不错的画质、帧率和发热表现。
全方位升级只为拍好画面
认知ISP给影像提升提供更好的基础,但新一代骁龙影像技术肯定不止于此。早在上一代就已经能够每秒处理32亿像素、以三摄拍摄18bit图像,即在零快门延时的条件下,每秒30帧,每张能达到1.08亿的像素,已经是业内最快。但高通没有在本次峰会上着重渲染参数而是更注意到了关系到实际影响体验的部分,也就是如何帮助普通用户轻轻松松便拍到更好的照片、视频。
处理图像的ISP进化后,有必要同步增强上游采集图像的传感器,骁龙与最主流的传感器厂商索尼、三星都有深度合作。在即将应用于数款高端手机的索尼IMX989、IMX800传感器上,协同支持了四重曝光数字重叠(QDOL4)技术,每帧画面都会经过四次曝光实现超高宽容度。
三星一侧的合作成果在ISOCELL HP3上首发,这颗200MP的传感器或许将出现在下一代三星旗舰手机中。用户可以拍摄2亿像素、5000万像素或者是1250万像素的照片,搭配第二代骁龙8拍摄2亿像素照片会有更精细画面表现,同时也有HDR视频拍摄、8K视频拍摄等先进能力。
与合作伙伴Prophesee带来的全球首个基于事件的视觉传感器,则让手机可以只记录下那些发生了变化的图像。不记录全部只记录部分的工作逻辑转换,手机可以拍摄更清晰的闪电、宽动态范围的画面,而且处理的数据和产生的功耗都会降低。
虚化引擎2使得手机可以模拟出f/1.4光圈的虚化效果,高通合作伙伴虹软为此还带来了导演模式录像功能,在画面中出现多个拍摄主体的时候,可以自动选择更合适的焦点并顺滑地进行实时切换,在搭载第二代骁龙8的终端上能自然地完成焦点变化。
高通和Google的系统级别合作更紧密了,在Android 13开始(也就是第二代骁龙8手机的出厂版本底层系统)提供10bit HDR、图片引擎、自拍防抖、杜比视界视频的拍摄播放和编辑等功能的标准API,应用开发者可以更轻松地调用。Pro Sight则能高比特率拍摄,便于后期处理。
认知能力也没有限于拍摄过程,还会给图像加入相应的标记便于检索。略显不同的是,搜索照片、视频使用的关键词可以不那么死板,大概的情绪表达或者相对模糊的描述,也能给出有不错精细度的结果。这会让你觉得,智能手机变得更加懂你了。
更快更轻松的连接体验
Snapdragon Sound骁龙畅听技术在第二代骁龙8上再升级,包括但不限于48kHz无损音乐串流、48毫秒的超低时延以及动态空间音频。最显著的变化是,智能手机上可以做到音质更好的真无线听音体验,并且从手机到耳机连接过程中的延迟进一步压缩,更接近有线连接了。
让人激动的是,在第二代骁龙S5、骁龙S3音频平台配合下,它们有望成为动态空间音频普及开来的重要角色。空间音频让耳机听音有了沉浸式的空间感体验,动态头部追踪支持的加入则让这一切变得更加真实,感知到的声音会随头部移动而即时转变,好声音就是这样不留痕迹。
Wi-Fi 7真的要来了。在FastConnect 7800连接系统加持下,手机连接网络的延迟可以下降到2ms以内,而6GHz频段下的速度能高达5.8Gbps,即使是在暂时不能使用6GHz频段的环境下,也能给到4.3Gbps的高速,并且同样省电。同时还有蓝牙5.3兼容,做到双蓝牙发射/接收。
我们可以清晰地预见到,采用第二代骁龙8的手机将会相当优秀,各方面体验都会有着令人欣喜的变化。而这背后,离不开骁龙坚持构建的AI和网联计算能力对用户体验产生的影响。
是时候从另一个角度审视旗舰智能手机
2023年已经不远,然而到现在都还有很多声音对手机抱有唯性能论的看法,认为没有绝对意义上的性能领先就没有客观上的强大。第二代骁龙8在CPU、GPU部分的性能和能效提升,也被视作这一观点的全新论据,似乎这就是新的旗舰移动平台的全部实力了。
放到实际体验中来看,光有纯粹的性能远远不够,要有能够充分释放性能的场景与体验,来让移动平台到手机整体拥有发挥潜力的空间。骁龙在影像和游戏的变化尤为明显,以影像为例,同时从算力、算法、计算逻辑等多个维度产生变革,最终有了拍得更好看而且又快又简单。
这件事也颠覆了我们的认知,一代代骁龙性能优势足够明显,但解决问题带来进化的不只是性能本身。在能效提升的大前提下,AI从另一个角度打破了原有的发展节奏,让短时间内不敢想象的事情迅速变为现实。得到的体验强大了,却不意味着要有同等的芯片面积和能耗提升。
AI和网联计算模式与经典算力的提升相辅相成,一方面以更大的比例参与到手机和其他智能设备使用场景中,另一方面则有诸如——影像有了实时进行的从全局到细节的处理、连接网络可智能调整状态降低功耗、与耳机汽车和XR等设备无缝协同工作的全新体验,深刻地改变了手机。
(本文转载自雷科技)
综上所述,我们也该换个角度来审视旗舰智能手机——“旗舰”定位不应是只有最高的规格,还要具备重新思考问题给出解决方案的姿态。第二代骁龙8给到的种种能力,让搭载的手机有了实现它的前提条件,也令2023年智能手机市场有机会回应更多期待。
在这之外,能够与第二代骁龙8协同使用的音频、可穿戴、XR、智能座舱产品也在到来,智能体验将会延伸到更小尺度的个人体验或者是更大尺度的公共场景。相信在未来,能看到AI驱动之下网联计算的更多价值。