
第二代驍龍8憑借面向整個(gè)平臺的開(kāi)創(chuàng )性AI智能設計賦能了非凡用戶(hù)體驗,樹(shù)立了網(wǎng)聯(lián)計算的新標桿,其搭載高通技術(shù)公司處理速度最快、最先進(jìn)的高通AI引擎,通過(guò)軟硬件的一系列創(chuàng )新,相較上一代帶來(lái)4.35倍的AI性能提升和60%的能效提升,從而為越來(lái)越多的創(chuàng )新型AI用例和AI增強的用戶(hù)體驗提供強大的性能基礎。
高通AI引擎由多個(gè)硬件和軟件組件組成,用于在驍龍移動(dòng)平臺上為終端側AI推理加速。它采用異構計算架構,包括高通Hexagon處理器、Adreno GPU、Kryo CPU和傳感器中樞,共同支持在終端上快速而有效的運行AI應用程序。其關(guān)鍵核心Hexagon處理器擁有一系列創(chuàng )新:提供專(zhuān)用供電系統、支持微切片推理、INT4精度、Transformer網(wǎng)絡(luò )加速等,可結合高通AI軟件棧和AI Studio提供全棧AI能力和優(yōu)化手段,行業(yè)內率先在終端側支持Stable Diffusion、ControlNet等生成式AI用例,并可與云端協(xié)同打造適應大模型時(shí)代的混合AI處理框架,助力AI體驗創(chuàng )新和生態(tài)繁榮。目前,第二代驍龍8移動(dòng)平臺已經(jīng)可以支持參數超過(guò)10億的AI模型運行。未來(lái)幾個(gè)月內,將有望支持參數超過(guò)100億的模型在終端側運行,這也將成為基于高通技術(shù)的產(chǎn)品的一大差異化優(yōu)勢。
終端側AI處理可以帶來(lái)處理時(shí)延,隱私和安全,可靠性等優(yōu)勢,并且在生成式AI場(chǎng)景下可以有效分擔云端處理的負載,降低成本和能耗,有助于云端協(xié)同的混合式AI處理架構的有效部署。高通AI引擎可提供卓越的終端側AI處理能力,并可跨越智能手機賦能更多邊緣移動(dòng)終端類(lèi)別,比如筆記本電腦、XR頭顯、IoT設備以及汽車(chē)等,引領(lǐng)終端側AI應用的進(jìn)一步發(fā)展。
據悉,高通深耕AI研發(fā)已超過(guò)15年,高通AI Research在基礎研究領(lǐng)域實(shí)現突破,并跨終端和行業(yè)進(jìn)行擴展,以賦能智能網(wǎng)聯(lián)邊緣。高通AI Research不僅在開(kāi)展全新AI研究工作,也率先在商用終端上展示概念驗證,為在現實(shí)世界中的技術(shù)規模化應用鋪平道路。高通AI Research的重要AI研究論文正在影響整個(gè)行業(yè),推動(dòng)高能效AI發(fā)展,并與公司所有團隊通力合作,將最新AI發(fā)展成果和技術(shù)集成到高通產(chǎn)品之中,讓實(shí)驗室研究所實(shí)現的AI進(jìn)步能夠更快交付,豐富人們的生活。
在WAIC現場(chǎng),高通還帶來(lái)了Stable Diffusion、ControlNet等生成式AI用例的技術(shù)展示。這是全球首個(gè)運行在A(yíng)ndroid手機上的Stable Diffusion終端側演示,和全球最快的手機上的ControlNet終端側演示。
Stable Diffusion是一個(gè)非常出色的從文本到圖像的生成式AI模型,能夠基于任何文本輸入,在數十秒內創(chuàng )作出逼真圖像。其參數超過(guò)10億,迄今為止主要限于在云端運行。高通采用全棧AI優(yōu)化的方式,通過(guò)量化、編譯和硬件加速進(jìn)行優(yōu)化,使其能在搭載第二代驍龍8移動(dòng)平臺的手機上運行,在15秒內執行20步推理,生成一張512x512像素的圖像。這是在智能手機上最快的推理速度,能媲美云端時(shí)延,且用戶(hù)文本輸入完全不受限制。目前,高通也已經(jīng)將Stable Diffusion這一生成式AI用例擴展到搭載驍龍計算平臺的PC產(chǎn)品上。
ControlNet圖像生成圖像模型是一項語(yǔ)言-視覺(jué)模型(LVM),擁有15億參數,能夠通過(guò)調整輸入圖像和輸入文本描述,更精準地控制生成圖像。在這項演示中,ControlNet能夠在終端側實(shí)現高效交互運行,通過(guò)一套跨模型架構、AI軟件和神經(jīng)網(wǎng)絡(luò )硬件加速器的全棧式AI優(yōu)化,時(shí)延12秒內可完成16步推理,生成AI圖像,無(wú)需訪(fǎng)問(wèn)任何云端,便能提供高效、有趣、可靠且私密的交互式用戶(hù)體驗。高通AI模型增效工具包、高通AI軟件棧和高通AI引擎在此過(guò)程中發(fā)揮了關(guān)鍵作用。