飛象網(wǎng)訊(魏德齡/文)科幻小說《三體》中降維打擊的案例總是讓人難以忘懷,球場(chǎng)之上當(dāng)一個(gè)球員送出精妙的傳球,也常被人們譽(yù)為“開啟上帝視角”,維度上領(lǐng)先往往可以帶來巨大的優(yōu)勢(shì)。
11月16日的驍龍峰會(huì)上,高通產(chǎn)品市場(chǎng)高級(jí)總監(jiān)徐恒在第二代驍龍8移動(dòng)平臺(tái)的技術(shù)介紹環(huán)節(jié)不斷用“二維到三維”來對(duì)產(chǎn)品性能與技術(shù)的提升進(jìn)行形容。而第二代驍龍8移動(dòng)平臺(tái)的產(chǎn)品發(fā)布本身就有著一個(gè)不同尋常的開篇。
不同尋常的開篇
談及每一次移動(dòng)SoC產(chǎn)品的發(fā)布,往往都是從CPU、GPU、AI依次開始,然而單從高通一直所堅(jiān)持的“移動(dòng)平臺(tái)”理念,而非“處理器”的做法上看,就能看出其中不同的考量思路。本次第二代驍龍8移動(dòng)平臺(tái)發(fā)布過程中的開篇介紹環(huán)節(jié)更是不同尋常,先是拋出關(guān)鍵詞“人工智能”,隨即表示內(nèi)置的AI引擎將開始AI加速的新時(shí)代,并開始著重介紹AI方面的性能提升,以及幾乎遍及手機(jī)各個(gè)使用體驗(yàn)環(huán)節(jié)的AI特性。
首先,內(nèi)置的AI引擎在升級(jí)的高通Hexagon處理器支持下,用戶能夠體驗(yàn)更快速的自然語言處理所帶來的多語種翻譯和先進(jìn)的AI影像特性。Hexagon處理器實(shí)現(xiàn)全新架構(gòu)升級(jí),包括微切片推理,和一個(gè)更大的張量加速器帶來高達(dá)4.35倍的AI性能提升。第二代驍龍8也是首個(gè)支持變革性的INT4 AI精度格式的驍龍移動(dòng)平臺(tái),在持續(xù)AI推理方面能夠?qū)崿F(xiàn)60%的能效提升。
強(qiáng)大的AI引擎能夠與ISP產(chǎn)生聯(lián)動(dòng),使其成為首個(gè)認(rèn)知ISP。簡(jiǎn)單來說,以往所謂的AI攝影都是“事后諸葛亮”,需要在拍攝完成后才能進(jìn)行優(yōu)化處理,用戶在使用過程中也能感知到一定的等待時(shí)間。有了認(rèn)知ISP的存在,就能通過實(shí)時(shí)語義分割實(shí)現(xiàn)照片和視頻的自動(dòng)增強(qiáng),利用AI神經(jīng)網(wǎng)絡(luò)讓攝像頭在情境中感知人臉、面部特征、頭發(fā)、衣服和天空等,進(jìn)行獨(dú)立優(yōu)化,當(dāng)畫面還處于取景框中的時(shí)候,就能讓每個(gè)細(xì)節(jié)獲得定制的專業(yè)圖像調(diào)優(yōu)。
有趣的是,或許今年年初驍龍X70發(fā)布之時(shí),誰也不曾想到該產(chǎn)品其實(shí)為第二代驍龍8進(jìn)行了較為明顯的劇透,這款內(nèi)置在第二代驍龍8中的5G平臺(tái)同樣也是首款內(nèi)置5G AI處理器的5G調(diào)制解調(diào)器產(chǎn)品,利用強(qiáng)大的AI特性支持突破性的5G上傳和下載速度、網(wǎng)絡(luò)覆蓋、低時(shí)延和出色能效。
本次第二代驍龍8移動(dòng)平臺(tái)發(fā)布過程中,GPU、CPU反而成了最后介紹的環(huán)節(jié),不過卻絕不可等閑視之。其創(chuàng)新性的采用了1、2、2、3的架構(gòu),擁有一個(gè)主頻可達(dá)3.2GHz的Cortex-X3超級(jí)內(nèi)核,2個(gè)A715中核、2個(gè)A710中核、3個(gè)A510小核,性能提升35%,能效提升40%。Adreno 740 GPU支持光追,性能提升25%。甚至通過查證還能發(fā)現(xiàn)第二代驍龍8依舊采用了臺(tái)積電4nm工藝。
不過,重中之重依舊是AI,對(duì)于能夠?yàn)橐苿?dòng)設(shè)備增添新維度的第二代驍龍8,AI已經(jīng)顯現(xiàn)出了照亮未來的耀眼光環(huán)。
增添新維度
“AI創(chuàng)新方法論本身在做自我的創(chuàng)新,將從二維走向三維!毙旌悴粩鄰亩鄠(gè)層面闡述著這種維度上的變化。
例如在手機(jī)中的ISP,最早的ISP,以及后來的CV-ISP都屬于受信息論約束的技術(shù),都還沒有突破過二維的限制,而隨著首個(gè)認(rèn)知ISP的出現(xiàn),從語義的角度已經(jīng)突破到三維認(rèn)知的水平。在此基礎(chǔ)上,移動(dòng)設(shè)備已經(jīng)不僅僅糾結(jié)于畫質(zhì),同樣要開始向創(chuàng)作邁進(jìn),第二代驍龍8可實(shí)現(xiàn)在人與人、人與物之間自動(dòng)對(duì)焦的導(dǎo)演模式,來助力用戶進(jìn)行視頻創(chuàng)作。
對(duì)于語義理解能力的提升也開啟了更大的想象空間,例如當(dāng)AI能夠充分理解時(shí)間軸語義后,閱讀一份文字日記后,就可以具備將其根據(jù)視頻素材自動(dòng)生成影片的能力,普通的舊日回憶也能夠通過影像得以再現(xiàn)。
從硬件角度上看,AI引擎中的微切片推理能力本身也是一種二維向三維的邁進(jìn),突破此前數(shù)據(jù)處理過程中的按順序進(jìn)行的二維邏輯,微切片推理則實(shí)現(xiàn)了在時(shí)間軸上的突破,可以在適合的時(shí)間點(diǎn)把所有適合的微切片進(jìn)行組合,從而可以最大發(fā)揮處理器的運(yùn)算能力。
由于實(shí)現(xiàn)了對(duì)于INT4的支持,Transformer的運(yùn)行同樣是在從二維方法論推進(jìn)到三維方法論,原因在于其可以跨過時(shí)間的約束,不僅可以進(jìn)行自然語言處理,還能進(jìn)行實(shí)時(shí)轉(zhuǎn)錄、情感分析、實(shí)時(shí)翻譯。
AI甚至還將改變很多玩家游戲中的體驗(yàn),例如目前游戲中當(dāng)玩家遇到所謂的“人機(jī)”時(shí),都會(huì)明顯感知到其拙劣的操作。而隨著AI的引入,即便是單機(jī)游戲中的電腦AI,也能擁有更加真實(shí)的自主操作能力,進(jìn)而提升玩家在游戲中的樂趣。
打開新大門
擁有全新維度的第二代驍龍8,在AI相關(guān)用例的性能表現(xiàn)上,相比競(jìng)爭(zhēng)對(duì)手,也可以說是降維打擊般的存在,如超分辨率、人臉檢測(cè)、背景虛化、語言方面,均比竟品A/競(jìng)品B表現(xiàn)出幾倍以上的優(yōu)勢(shì)。
小米在本次峰會(huì)期間就展示具備完全離線AI能力的小愛同學(xué),依托第二代驍龍8的算力,離線實(shí)時(shí)字幕翻譯功能可以非常流暢即時(shí)顯示,甚至同時(shí)顯示三語也依舊流暢。并且離線AI能力的實(shí)現(xiàn)并非降低實(shí)際的使用體驗(yàn),相比在線AI模式,存儲(chǔ)降至9%,質(zhì)量保持在了91.9%的水平。
同時(shí),離線AI能力還給予了用戶更高的安全保證,由于本地即可實(shí)現(xiàn)強(qiáng)大的自然語言處理能力,音頻數(shù)據(jù)也就不用上傳至云端,大大保護(hù)了用戶的隱私。要知道,現(xiàn)在不少IT從業(yè)者甚至敏感的保持著不用智能音箱時(shí)就會(huì)拔電源的習(xí)慣。
如同小米的案例,由于高通傳感器中樞AI能力的存在,為了運(yùn)動(dòng)識(shí)別、手勢(shì)檢測(cè)、人體檢測(cè)、超聲波、智慧感知攝像頭等眾多用例打開了新大門。借助高通AI Stack工具的助力,移動(dòng)開發(fā)者能夠開發(fā)出即便在手機(jī)平臺(tái)上也具有超高性能和優(yōu)秀體驗(yàn)的下一代 AI 移動(dòng)應(yīng)用。并且高通AI Stack還將會(huì)提供包括 QualcommAI Studio 在內(nèi)的更多特性和工具。
無論是在AI側(cè)的大幅性能提升,還是種種技術(shù)設(shè)計(jì)上的新突破,顯然第二代驍龍8移動(dòng)平臺(tái)已經(jīng)跳出了傳統(tǒng)的思維定式,在新的維度上為智能手機(jī)的發(fā)展開啟了一扇通往未來的大門。