0
| 本文作者： 吳優(yōu) | 2022-12-05 19:04 |
今年11月，高通發(fā)布了其旗艦移動平臺第二代驍龍8，采用臺積電4nm工藝，Kryo CPU性能提升35%，能效提升40%，Adreno 740 GPU性能提升25%，能效提升45%。
值得注意的是，這一次高通在AI方面做了關(guān)鍵升級，在這個芯片制程更新速度放緩的年代為智能手機(jī)性能提升提供了新道路，同時也在開啟全新的AI創(chuàng)新時代。
高通打造的專為AI而生的移動平臺，具體在哪些方面有所升級？又能為終端用戶帶來何種新體驗？
AI引擎多方位升級，認(rèn)知ISP打開新世界
“我們把人工智能作為設(shè)計第二代驍龍8的關(guān)鍵技術(shù)，將全新的旗艦移動平臺打造成一個創(chuàng)新引擎，一個真正的AI大師。”在2022驍龍峰會首日，高通高級副總裁及CMO莫珂東如此說道。
AI引擎升級是第二代驍龍8的重點，為了滿足不同場景和應(yīng)用對AI算力和功耗的需求，高通新一代AI引擎進(jìn)行了四個關(guān)鍵升級。
一是在Hexagon處理器中加入專用的供電系統(tǒng)，進(jìn)一步提升芯片處理的能效比；二是對內(nèi)存讀/寫進(jìn)行改進(jìn)，盡量減少對外部數(shù)據(jù)的讀寫，降低能耗；三是通過微切片的推理方式，將單個神經(jīng)網(wǎng)絡(luò)拆分成幾萬個微切片，然后將其分配到張量、標(biāo)量、向量加速器上，從而提高整個神經(jīng)網(wǎng)絡(luò)的推理速度。
另外，高通AI引擎還升級了精度支持，率先支持INT4 AI精度格式。
高通技術(shù)公司產(chǎn)品管理副總裁Ziad Asghar指出，“與INT8相比，INT4將帶來60%的能效提升和90%的AI推理性能提升。具體來看，從32位浮點運算到4位整數(shù)運算，我們將能耗降低了驚人的64倍?！?/p>
通過在硬件架構(gòu)層面進(jìn)行AI引擎的技術(shù)創(chuàng)新，第二代驍龍8的自然語言處理性能提升超過4倍，能效提升達(dá)60%。
不過，AI引擎的升級只是第二代高通驍龍8平臺 AI能力提升的一部分，“真正的AI大師”從使用攝像頭收集信息到傳感器中樞就已經(jīng)在使用“AI魔法”。
此前，高通在手機(jī)攝像頭中引入計算攝影，就已經(jīng)實現(xiàn)了一些令人驚嘆的功能，包括2億像素拍照以及首次實現(xiàn)捕捉超過10億色的8K HDR視頻拍攝等，不過無論是多精美的照片和視頻，都是在拍攝完成之后才開始運行神經(jīng)網(wǎng)絡(luò)，不僅費時費電，還會影響用戶快速拍攝下一張照片。
這一次，高通推出了認(rèn)知ISP，這是一項通過一個名為“Hexagon直連”的物理連接，將Hexagon處理器和Qualcomm Spectra ISP之間直連的新技術(shù)，通過提高存儲和計算效率，實時運行被稱為“語義分割”的AI照片編輯，直接在ISP中完成“修圖”，從而生成更具美感的照片。
如果將原先的ISP理解成“先存后算”，那么認(rèn)知ISP就是“邊存邊算”，甚至是“先算后存”，顯然后者會比前者效率更高。認(rèn)知ISP的誕生也相當(dāng)于幫助智能手機(jī)從時間的維度更好地理解和處理信息。
高通傳感器中樞作為高通AI引擎的一部分，為了支持層出不窮的AI用例，集成了兩個AI處理器，支持直觀體驗，實現(xiàn)自定義喚醒詞。
對于終端用戶而言，這些AI技術(shù)升級與創(chuàng)新似乎略顯抽象，真正理解高通的AI魔法，還需要觀察具體在應(yīng)用方面發(fā)生哪些變化。
結(jié)合獨特軟件棧，影像、游戲、連接全面升級
首先，在離開發(fā)者更近的軟件工具及生態(tài)方面，高通也做了相應(yīng)的升級。
早在今年6月，高通就發(fā)布了自家首個統(tǒng)一的高通AI軟件棧（Qualcomm AI Stack），將所有業(yè)務(wù)線的AI軟件功能訪問權(quán)限都集中在統(tǒng)一的軟件棧中，開發(fā)者可以面向不同智能終端的AI模型和軟件遷移以及開發(fā)。
開發(fā)者和客戶可以根據(jù)自己的實際需求進(jìn)行模型的開發(fā)和優(yōu)化，且只要一次開發(fā)，就可以將解決方案跨高通所有產(chǎn)品線進(jìn)行遷移。
其次，在體驗方面，終端用戶能夠感受到無論是影像、游戲，還是連接的全方位升級。
正如前文所提到的，認(rèn)知ISP可以實時運行語義分割，“實時語義分割技術(shù)具有開創(chuàng)性意義，這意味著攝像頭能夠真正實現(xiàn)對捕捉畫面的情景感知”，高通技術(shù)公司產(chǎn)品管理副總裁Judd Heape進(jìn)一步解釋道。
高通對實時語義分割濾鏡進(jìn)行了效果演示，能夠看出這一神經(jīng)網(wǎng)絡(luò)能夠識別人臉五官細(xì)節(jié)，還能夠識別各種配飾，識別到眼鏡時，還能夠?qū)ζ浞垂夂脱９膺M(jìn)行消除。
加上ISP自帶的編輯功能，以及高通與三星、索尼在圖像傳感器方面的合作，用戶已經(jīng)能夠享受專業(yè)級的拍攝體驗。
當(dāng)用戶化身為手游玩家時，能夠與AI訓(xùn)練過的敵人作戰(zhàn)，就像是同真人作戰(zhàn)那樣，在一個更具挑戰(zhàn)性的游戲環(huán)境中成長為更加出色的玩家。
在《Air Derby Battleground》這一游戲中，就能看到飛機(jī)智能地飛行，且隨著時間推移變得更加智能，這些序列由多個神經(jīng)模型和數(shù)千個神經(jīng)元進(jìn)行訓(xùn)練，并在Hexagon處理器中進(jìn)行推理，這些飛機(jī)會自適應(yīng)調(diào)整行為甚至掌握主動，真正用“智慧”同人類玩家戰(zhàn)斗。
值得注意的是，除了AI方面的提升，第二代驍龍8移動平臺集成的GPU還能夠在移動終端游戲中支持基于硬件加速的實時光追技術(shù)，而首批采用這一光追技術(shù)的手游即將面世。
網(wǎng)易基于第二代驍龍8的光線追蹤的手游《逆水寒》也已完成了大部分制作，將給玩家?guī)沓錾墓庾敷w驗。
光追特性關(guān)閉和開啟后游戲畫面中瓷瓶表面反射對比
在《逆水寒》極富武俠情調(diào)的演示場景中，不開啟光追效果時能表現(xiàn)出水面的波光、漣漪，并微弱地映射出水面上的其他物體，但無法達(dá)到全反射的鏡面效果。而在開啟實時光追效果后，游戲引擎可以按照真實的光線反射規(guī)律渲染畫面，俠客、竹林、天空被清晰地倒映在水面中，色彩真實絢爛，畫面層次感清晰，“呼吸的江湖”就在眼前。
在無線連接方面，驍龍X70作為全球首個和唯一一個配備5G AI處理器的調(diào)制解調(diào)器及射頻系統(tǒng)，利用AI功能支持突破性5G性能。
調(diào)制解調(diào)器內(nèi)的AI處理器能夠?qū)崟r優(yōu)化多種關(guān)鍵參數(shù)和條件，比如信道狀態(tài)反饋、毫米波波束成形、天線調(diào)諧和其他自適應(yīng)功能，在終端上實現(xiàn)無與倫比的連接速度、覆蓋、時延和電池續(xù)航提升。
此外，借助全球首個和唯一一個支持高頻多連接并發(fā)的Wi-Fi 7解決方案FastConnect 7800，第二代驍龍8將開啟Wi-Fi 7時代。
AI產(chǎn)品出貨超20億，AI體驗無處不在
當(dāng)然，高通所開啟的AI創(chuàng)新時代，不僅僅體現(xiàn)在智能手機(jī)方面，高通作為最大的AI邊緣芯片公司，迄今為止AI產(chǎn)品出貨已經(jīng)超過20億，其AI技術(shù)從智能手機(jī)滲透到其他終端，所帶來的AI體驗已經(jīng)無處不在。
在PC領(lǐng)域，高通已經(jīng)攜手宏碁、華碩、惠普、聯(lián)想、微軟Surface、三星和小米等領(lǐng)先的PC OEM廠商，發(fā)布了多代驍龍計算平臺。
終側(cè)端AI處理正在成為除了CPU和GPU之外的衡量PC的第三個指標(biāo)，正如十年前GPU加速改變圖像和視頻計算那樣，專用AI將推動實時優(yōu)化和能效發(fā)展的下一個征程。
UL Procyon等用戶體驗基準(zhǔn)測試顯示，高通Hexagon處理器比競品的CPU快5倍，比競品GPU快2.5倍，這意味著當(dāng)用戶在運行視頻會議等計算密集型應(yīng)用時，將享有無縫的體驗。
在2022驍龍峰會上，高通技術(shù)公司產(chǎn)品管理副總裁 Kedar Kondap利用第三代驍龍8cx的AI引擎，演示了全新的Windows Studio效果，即便是在戶外工作，也能通過降噪保持語音的清晰洪亮和攝像頭的聚焦，保持生產(chǎn)效率。
XR也是除了智能手機(jī)之外的移動計算平臺。多年來，高通都在持續(xù)推動著XR的創(chuàng)新，專注于打造業(yè)界領(lǐng)先的平臺、基礎(chǔ)感知技術(shù)、參考設(shè)計和開發(fā)者工具。
高通新推出的驍龍AR2平臺旨在變革頭戴式AR眼鏡外形設(shè)計，因此采用了多芯片分布式處理架構(gòu)和定制化IP模塊。其中驍龍AR2平臺主處理器在AR眼鏡中的PCB面積縮小40%，平臺整體AI性能提升2.5倍，功耗降低50%，能夠支持AR眼鏡實現(xiàn)低于1W的功耗。
這將支持在AR眼鏡上打造更豐富的體驗，以及更長時間的舒適佩戴。
正如大家所期待的那樣，第二代驍龍8移動平臺正在改變?nèi)蛳乱淮炫炓苿邮謾C(jī)，而其他終端廠商也在同高通進(jìn)行合作，在智能聯(lián)網(wǎng)邊緣進(jìn)行探索，高通驍龍的AI觸角已經(jīng)伸向各個角落。
相信在不久的將來，高通所開啟的AI創(chuàng)新時代中，會有越來越多的終端加入，更多的邊界被突破，我們拭目以待。（雷峰網(wǎng)(公眾號：雷峰網(wǎng))）
相關(guān)文章：
折疊旗艦全面進(jìn)化，驍龍8+助力vivo X Fold+強(qiáng)者更強(qiáng)
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。
