全面融入AI的第二代骁龙8，能否成为手机未来的“最优解”？ ...

一般小丑鱼

9 u* L, u: \" Z# X5 V- M* X　　作者|ByArsT
　　第二代骁龙 8如约推出，在我们看来，未来一年内Android平台手机的发展路线已经被彻底敲定了。
6 m" Z; T0 e# {. n0 _　　如果对这场发布会有所关注的朋友，一定会注意到一个有意思的地方。
　　从发布会开始到结束，高通几乎通篇都在讲自身产品在AI方面的优势，反复强调用户体验和AI赋能。
/ l# M5 n7 e; g6 a( X　　介于高通大篇幅对AI的介绍，我们认为高通下一步的方向，就是要用AI来加强产品的使用体验，以此为未来手机产品发展划出一条新的方向。
( Z  N' g, M; a5 l* [6 \% i1 P
　　图源：高通官网
! Y! q$ |. q  ]6 c7 I　　近两年，国内一直在强调“智慧手机”这一概念，从早期的用户操控手机，再到手机辅助用户，手机正在从单纯的工具变为辅助消费者的“助手”。
　　从手机厂商的愿景来看，“智慧手机”的下一步，就是如何让手机理解用户，成为消费者在数字世界的“管家”。
* k0 k& v; n+ M  L　　在迈入“下一步”的环节当中，AI是至关重要的一环。第二代骁龙 8采用了与AI深度融合的方式，来增强消费者的使用体验。
　　那么，AI算力与产品体验的融合，会成为未来手机的“最优解”吗？
　　更强大的AI算力，能为消费者带来什么？
% g% Z* t0 N  \9 a7 F　　在谈及智能手机未来方向之前，我们先来聊聊第二代骁龙 8的AI算力。
　　在近两年的移动平台上，AI正逐渐从幕后转为台前，成为厂商们宣传的重点。尤其是与AI深度融合的第二代骁龙 8，算力的强弱是贯穿所有特性的关键。

  Q7 i  X* \  E1 K6 F　　图源：高通官网
; A, J9 _0 c8 C# h: O+ ?# F　　在全新的第二代骁龙 8移动平台上，高通AI引擎的核心Hexagon 处理器实现了重大升级，Hexagon 处理器包含标量加速器、向量加速器和张量加速器，针对对于现代AI十分重要的张量加速器，高通将其尺寸翻倍，同时还引入了全新的微切片推理，并增加了独立的供电系统。
: R1 ]$ j3 e7 M9 g7 C1 B
　　图源：高通官网
4 V: y- l3 g* f' l　　需要注意，基于这颗Hexagon 处理器，第二代骁龙8是目前唯一一颗支持INT4精度AI计算的移动平台。
' [8 V6 _1 b' I' d; h8 y　　与此前经常提起的浮点计算精度模式相比，支持INT4精度计算能够在移动平台上以有限的计算资源，运行更多神经网络模型，在不损失精度的情况下精简AI模型以降低功耗。
　　在持续AI推理计算任务上，第二代骁龙 8相比第一代骁龙 8移动平台性能提升了4.35倍，能效提升60%，从32位浮点运算到4位整数运算，能耗降低了整整64倍。

) B* ]/ B8 w: Z3 Q　　图源：高通官网
6 N6 z* R- o" Y　　只谈及数据，我们很难从中理解到升级进步的幅度，那我们就从功能角度进行理解。
$ N. L, s: T" \4 {2 Z! f　　AI的赋能，让手机有了语言理解的能力，这一技术被称为自然语言处理（NPL），未来搭载第二代骁龙 8的移动设备，能够更快的理解和分解人类语言。并且由于算力的提升，在本地就能实现更精准的语言理解能力，通过本地进行翻译、理解，在消除网络波动的同时，还能更好的保护消费者的“大数据隐私”。
8 z" Y6 I4 W- K6 b5 e6 T　　基于第二代骁龙 8的AI性能，小米也宣布会在2023年推出离线版小爱同学，支持离线对话、语音唤醒、离线翻译等功能。

　　图源：小米官网
　　这是语音助手的一种全新形态，这些都与消费者的产品体验息息相关。
: n$ t- ]% ?$ E/ n: m. o; z　　为手机加入看世界的“眼睛”
　　相比于前面比较“缥缈”的AI算力，“高通传感器中枢”会让手机变得更“拟人化”。
* n4 j9 p- S6 h. d* G& g　　在第一代骁龙 8上，高通传感器中枢就发挥了强大的作用，用于处理一些需要长时间运行的新特性，比如语音助理、活动检测、环境理解，以及低功耗感知摄像头（人脸解锁扫描）。利用AI的强大算力，来为我们处理手机上的音频、视觉以及传感器的信息，帮助设备侦测周围环境并作出相应调整。
( r7 e5 A% C) a5 I( A
# Y% n; H! W. p  }$ z9 r  t" H　　图源：高通官网
　　在第二代骁龙 8上，高通为其内置了两颗 AI协处理单元和一颗DSP，用来提升高通传感器中枢的能力。
4 Z3 I# y$ N5 V　　在加入更多的AI协处理单元后，高通传感器中枢在“始终感知能力”上，得到了大幅提升。在提高设备AI性能、加快处理速度的基础上，提升了音频和传感器的始终感知能力，并且解锁了“始终感知摄像头”的全新能力。
　　“始终感知摄像头”最重要的一点，就是为手机加入能够看到世界的眼睛。
  U) d! B6 `/ h0 A' Y' T' T0 \! t　　搭载第二代骁龙 8的手机，可以在后台持续运行摄像头的功能，并且依托于AI算力，将一切都留存在手机当中，避免隐私泄露。
　　比如，熄屏下只需对着二维码，就可以实现扫码的行为，手机自动弹出扫描出来的窗口；如果有陌生人在身旁，前置摄像头也可以对其进行识别，并且自动隐藏通知，当感知到陌生人离开后重新开启；当用户躺下时，手机会自动更改屏幕方向，无需进行手动更改。

　　图源：高通官网
　　高通传感器中枢的功能远不止此，对于语义识别、日常操作学习等，高通传感器中枢都能有着比较不错的表现。
　　除此之外，为了带来更强大的AI影像体验，高通选择在Hexagon 处理器和Qualcomm Spectra ISP之间，增加了一个名为“Hexagon直连”的物理连接，在两者之间建立了直接连接通道。
% Z5 {) t5 }* Z3 q
　　图源：高通官网
　　而这一操作，除了让智能手机能够从多个层面认知外部世界之外，还获得了一个全新而独特的、具有AI能力的ISP，高通将其称之为“认知 ISP”。
& [& [! _5 h  w6 g  B2 v/ m# Z　　拥有独立AI的拍照系统
　　近两年，计算摄影成为手机厂商的不二选择，除了能够保证更优质的成像效果之外，还能让更多零基础人群体验到拍摄的乐趣。
' s; C1 {  g0 @/ H　　但事实上，计算摄影只是AI拍照系统中的一环。
; j# o# Q7 r% j  H* Z4 d　　2018年，高通推出了首款支持“计算机视觉（CV-ISP）”的ISP：Spectra 380，如今又推出了全新认知 ISP，高通一直想让AI深度介入影像系统当中。
　　此前的AI摄影有着较大的局限性，手机拍摄与AI引擎介入之间有着先后顺序，在手机进行拍摄后，系统才会调用神经网络来对图片进行优化和计算，在耗时耗电的同时，还会影响拍摄速度和质量。
5 b9 {5 L4 F: W7 I! o, x$ i# Z6 l! W　　简单来说，就是先拍照，再AI。
1 c* A8 @, U# f　　由于第二代骁龙 8在Spectra ISP与Hexagon 处理器之间建立了物理层面的直连通道，两者之间可以进行实时的、大量的数据交换，相当于为Spectra ISP带来更强的AI认知能力，去更好的理解世界、环境、物体、光线等等。
* v2 \1 p# G5 a2 `- o, @+ e3 M
　　图源：高通官网
　　所以，有了强大AI性能的影像系统，有了更多新的玩法。
: G6 O! I/ u8 q; d  O' t: ?　　高通为搭载第二代骁龙 8的移动设备加入了名为“语义分割”的AI照片编辑技术，能够将画面中多种不同的元素进行自定义编辑和分割，将每个物体分割变成类似“Photoshop”图层一样，在拍摄时根据每个物体的种类，进行编辑分类、柔化皮肤、锐化草地等等，整个过程在拍摄时都在实时运行，甚至在按下快门前，也就是取景框当中就可以实时看到这一切。
/ B. I8 U  R4 M; r
: N7 m, \5 \, c  o9 U( s　　图源：高通官网
　　“语义分割”能做的远不止这些，第二代骁龙 8还能实现对捕捉画面的情境感知，比如在拍摄面部时，会对表情进行智能检测，识别嘴唇、牙齿、皮肤、头发等，还能识别出手表、头盔、眼镜等，且智能的消除掉反光和炫光，对不同细节完成针对性的优化。
4 c; N8 ^# d# H& y3 `* T
& ~6 O1 @) h9 u: w# c% @  K& V　　图源：高通官网
　　这相当于，在拍照的同时，还有一个优秀的“P图师”在 进行实时服务。
　　“语义分割”的实现，意味着手机拥有了类似人类的思维，能够知晓“美与丑”，从另一方面说，也是为手机影像带来了新的“生命”。
. ?% F% e# O1 Z, P/ S　　不管多强大的AI影像也需要更强势的硬件支持，最后我们再来简单聊聊第二代骁龙 8在基础影像上的一些进步：
　　第二代骁龙 8依旧是18-bit 的三ISP，支持HDR 10、HDR 10+、HLG、杜比视界。单摄像头最高支持2亿像素，在支持30fps、多帧降噪（MFNR）以及零延迟拍摄（ZSL）条件下，单摄像头支持一亿像素，双摄像头支持6400万像素+3600万像素，三摄像头最高3600万像素。
　　在视频拍摄上，第二代骁龙 8支持拍摄8K HDR@30fps的画面，并且同时拍摄6400万像素照片，支持4K@120fps视频拍摄，并且加入了AV1编码格式，最高可播放8K HDR@60fps视频。
* e1 v7 c; Y* r# r: n- _! W7 `
+ v" K% B4 U: w, K4 E$ Q5 h0 P$ k　　图源：高通官网
　　此前，由于各大手机厂商的硬件和调教风格不同，拍摄出来的照片时好时坏，稳定性欠佳。基于这一情况，高通选择了与影像厂商进行联合调校，合作出特定传感器针对第二代骁龙 8进行优化，支持了包括索尼的四曝光数字重叠技术（QDOL-HDR）、三星的ISOCELL HP3 2亿像素传感器等技术。
　　由于高通已经对部分传感器调校完毕，相信未来会有更多的手机厂商选择这几款传感器，使用起来也更为方便。
5 ]  h% ^) k3 G0 a$ a  Z3 @8 @" }7 ]　　5G也要加入“AI”
　　在文章开头，我们聊到了AI与体验的融合会不会成为手机的未来发展方向。
8 P7 }$ y, x! R　　在这一点上，高通有着更为“激进”的想法，甚至在5G基带中也塞入了一颗AI处理器。
4 ]: A  T3 X. C& g3 S- G1 M　　第二代骁龙 8搭载了骁龙 X70 5G调制解调器及射频系统，成为首个以AI赋能的移动平台基带。
4 ~6 Z4 i! H' u: r' L1 R　　在基带中加入AI，比我们想象中的要更为有用，AI可以大量介入到网络传输当中，实时优化关键参数和条件，比如信道状态反馈、毫米波波束成形、天线调谐和其他自适应功能，大幅度降低功耗，提升连接速度。
8 r! y" B" h& P! t5 z0 B' q
9 o) ^2 g0 j( I! ?" O, T+ ?  P　　图源：高通官网
　　搭载第二代骁龙 8的移动设备5G传输速度，甚至能达到10Gbps。
; N4 n% m( f+ w　　除此之外，X70 5G基带还支持双卡双通（DSDA）5G连接。早前的双卡双通最大的问题就是需要两套射频系统，并且由于信号过于复杂，还会对WiFi、蓝牙等信号造成影响。

+ k, t/ |! C5 u; x( |　　图源：高通官网
2 V' ^+ @6 ~" R# ]5 e; `4 j* k5 W　　如今第二代骁龙 8通过自研的射频信号软件虚拟化技术，实现了5G+5G/5G+4G的双卡双通，当卡一在进行数据传输或进行通话时，卡二同样仍旧可以进行数据传输或进行通话，不会影响手机使用状态。
　　在WiFi连接上，第二代骁龙 8支持WiFi 7（802.11be）连接，在下载速度上最高能达到5.8Gbps，同时这也是全球时延最低的WiFi，低于2ms。
2 j: L* }$ d6 |4 p　　光追技术：更贴近真实的游戏体验
　　聊了AI技术的加入对手机体验上的影响，我们再来聊聊游戏方面。
　　第二代骁龙 8改变了处理器架构，带来更为强大的性能，以及支持了更先进的游戏技术：光线追踪。
　　第二代骁龙 8搭载了一个基于Cortex-X3的Kryo超大核，主频达到了3.2GHz，大幅度提升了单线程性能。此外，这次第二代骁龙8在架构上进行了调整，从早前的1+3+4的架构变成了1+2+2+3的架构，四个性能核心（2 x Cortex A715 + 2 x Cortex A710），频率均为2.8GHz，三个效率核心Cortex A510，频率为2.0GHz。
　　四个性能核心的改变，让第二代骁龙 8在日常多线程负载上，有了更好的表现。
) R0 z! V- _+ m4 [) v+ C! v　　根据官方说法，第二代骁龙 8的CPU性能提升了35%，能效提升了40%。
; ?2 |3 n/ c; X
　　图源：高通官网
, ?, P; A# d! Z) E　　在GPU上，全新的Adreno 740 GPU在性能上同样实现了跃进，相比第一代骁龙 8有着25%的提升，在能效上提升高达45%，并且新加入了Vulkan 1.3的支持，有着30%的Vulkan提升。
* V( S7 V) J2 j+ T& q' E/ Z　　我们再来聊聊光线追踪技术。
) `2 k& ?; r  V, y* W$ c1 F　　在过去两年里，包括三星、OPPO、Imagination等公司纷纷发布了各自的手游光追技术，但由于技术不够成熟、软硬件协同不够，仍旧面临着各种问题。
　　如今高通终于下场，在第二代骁龙 8上实现了光线追踪能力。

　　图源：高通官网
　　光线追踪技术的加入，能够影响整体画面的真实度，提供不同材质更真实的反射，以及真实阴影和环境光遮蔽等光学反射效果。

　　图源：
' ^. e" e3 p1 e) l$ ^, a　　高通官网
" {2 T9 J* F' ^4 Y' j) X　　简而言之，光追技术的加入会进一步加深手游的“真实性”。
　　对消费者来说，一个高质量手游时代即将到来，并且随着移动平台的性能不断加强，会有吸引更多3A端游厂商向着移动游戏平台进行迁移。
, _1 M7 Q4 t4 ?　　目前，网易游戏已经宣布与高通合作，未来会基于第二代骁龙 8移动平台为《逆水寒》添加实时光追技术，实现更真实的游戏画面。
　　融入AI的第二代骁龙8，能否成为手机未来的“最优解”？
　　答案是，会。
　　我认为，如今移动设备的性能确实存在“溢出”的现象，如何增强消费者的使用体验，是一切问题的关键。
　　高通通过第二代骁龙 8，以AI赋能语言理解、手机视觉、AI拍照、5G传输，能够从全方位对手机体验进行提升，让手机理解用户的每一个动作，感知整个世界。

7 L: C' s3 O1 _$ k　　图源：高通官网
　　第二代骁龙 8通过全平台的AI赋能案例，向我们证明了，AI的深层次融入，才是未来手机发展的“最优解”。
+ f( F5 M: L; _3 T, |$ s$ o　　从如今高通展示出未来手机的发展方向，我们能够明显感觉到，如今高通在AI领域的领导力和适用性，通过自身的坚实技术，成为手机厂商不可或缺的技术底座。
　　这一情况我们也可以理解为，高通是驱动手机发展方向的幕后厂商。
9 u7 B6 J1 m! G4 ]1 p, G+ e; |　　随着第二代骁龙 8的发布结束，有越来越多的厂商宣布采用高通新一代移动平台。目前小米、OPPO、一加、vivo、iQOO以及红魔游戏手机，都已经宣布将会首批推出搭载第二代骁龙 8的手机新品。
8 \- j* h: X0 W5 }  w　　不知道手机厂商会为消费者提供一份怎么样的答卷呢？
; J( `8 K! Q) ?: C* k  ?0 Q* i# s