論機智,還是國產安卓旗艦花樣多,從2999到10999元,各有各的“開竅點”_風聞
量子位-量子位官方账号-2022-01-30 19:27
蕭簫 發自 凹非寺
量子位 | 公眾號 QbitAI
趕在春節前,各家國產安卓旗艦機陸續上市,從小米12 Pro、榮耀Magic V、iQOO 9 Pro,到一加10 Pro、realme真我GT2 Pro、moto edge X30…晃眼一看數不過來。
拿到手機後,就能發現挺多有趣的功能細節:
像小米12 Pro的“萬物追焦”,一舉成為鏟屎官心頭好,就算寵物跑出畫面,也能自動對回焦,雷軍看了都要激情轉發:

又像是拿手機助手當“一卡通”的榮耀Magic V,特殊場景下自動識別定位並彈出應用窗口,像到快遞站彈收貨碼,到機場彈登機牌,到地鐵口彈乘車碼:

……
花哨的功能並非突然冒出來的。
近些年,手機圈比拼早已不是性能參數式的唯“分數論”,隨AI技術發展,加之驍龍8芯片這樣的硬件迭代,AI大量結合需求場景,提供更多豐富的可能。
那麼,這些新功能用的是什麼樣的AI能力?這些能力中,又有多少與底層芯片關聯?
一起來看看這些新應用背後的技術“底細”。
從人眼追蹤到“電子圍欄”
先來看看AI在攝影、辦公通勤、通信等場景的新應用。
攝影上,最好玩的功能要屬小米12 Pro的“萬物追焦”了。
這項技術可謂手殘黨的福音,不用再擔心目標滑出鏡頭之外,因為AI的眼裏只有它:

**△**圖源:鵝板凳
(在發現這項技術能拍攝貓狗魚鳥後,網友們開始整活起了乒乓球和鍵盤,甚至有網友想拿它追拍蚊子……)
這項技術從小米的“鐵蛋”機器狗的人體視覺追蹤技術中移植而來,擴展到了小米12 Pro上。
但要注意的是,小米12 Pro鏡頭追蹤的物體,全部都是它沒有見過的,而且這些物體的角度、大小都會發生變化,甚至可能在鏡頭內外“反覆橫跳”。

也就是説,AI必須掌握迅速學習目標特徵的能力,將第一次見到的物體“記錄下來”,並在再次見到時就認出它。
除此之外,小米12 Pro的“萬物追焦”還首次實現了人眼追焦功能,近距離鎖定人眼,遠距離放大到全身。

**△**即使動作誇張如跳大神也能識別(狗頭)
在人臉識別時,驍龍8提供的300個面部識別特徵點(速度還提升3倍)技術,還能很好地解決超廣角鏡頭下縮小人臉後難以識別的問題。
結合手機檢測到劇烈運動時自動提高快門速度的功能,“萬物追焦”就能保持畫面的清晰度,避免出現下圖這種效果:

其他旗艦的攝影能力進步,主要體現在夜景上。
手機廠商們不會放過驍龍8在夜景拍攝方面帶來的優勢。畢竟相比於上一代芯片,還只是合成6幀左右圖像用於拍攝清晰夜景,今年驍龍8的AI引擎直接一口氣合成30幀(反正AI算力夠大)。
這其中的代表要屬iQOO 9 Pro的夜景視頻,簡直就是夜景模式的“卷王”、AI算法的全家桶。
從NR噪聲消除、MEMC運動補償、多幀融合,再到自研AI Deglare和RAWHDR等算法,能用上的AI算法着實不少。
如果想要更快地拍攝夜景效果,就必須實時運算多個AI算法,對於芯片算力的要求同樣巨大。結合驍龍8,iQOO 9 Pro拍出的夜景視頻更接近人眼:

辦公通勤上,最好用的要屬榮耀Magic V的智能卡片。
你會發現,這個結合了“電子圍欄”和智能助手的功能,好像一直默默在後台運行,一旦到達指定地點,手機就會自動彈出通知,生怕你錯過什麼重要信息,但功能又不會特別耗電。
也就是説,只要帶着這部手機,你出行時就像從一個“圍欄”走到另一個“圍欄”中,AI能準確地感知到你去了哪裏。
例如你剛到機場趕飛機,手機屏幕上就已經彈出了電子登機牌、或是智能報時提醒,確保不錯過航班:

這類可以實時啓用、感知周圍環境的功能,加上驍龍8上的第3代高通傳感器中樞,能讓AI能在極低功耗下處理大量數據信息,性能增加75%的同時,功耗還比上一代降低50%。
要是在早前手機芯片上運行這類實時啓動的卡片,不僅速度更慢,還會更費電。
通信上,最實用的功能要屬AI網絡信號增強了。
moto edge X30針對信號研發了三類算法,其中ASDiv用來選擇最合適的天線信號,MAAT則是用來在弱網模式下(高鐵、電梯等)增加信號強度,最後SRS則是給信號選擇最優的傳輸路徑。
在這裏,驍龍8集成了驍龍X65調制解調器和射頻系統,支持AI天線調諧技術,用AI讓信號傳輸更穩定的同時,將手握感知精確性提升30%、功耗還降低30%。
嗯,所以在電梯裏、高鐵上玩手機,應該也會比之前更流暢。

除了這些場景外,遊戲上如真我GT2 Pro、一加10 Pro等旗艦機也會用AI來調度資源。
當然,上面這些都還是應用層面的提升。
同時運行更多AI算法
從根本上來説,這些新算法的運算性能提升、功耗下降,背後離不開驍龍8的第7代AI引擎。
雖然廠商們推出了不少新AI算法,但如果芯片性能不足、運行出現卡頓的話,這些算法就會變得很雞肋。
因此,必須在硬件大小受限的情況下,想辦法提升芯片AI性能。
一方面需要提升硬件中的專用AI芯片算力,例如在今年的新一代Hexagon中,高通透露張量加速器性能提升了2倍、共享內存提升2倍,整體AI工作負載性能提升70%。
另一方面,更需要在軟硬件適配上,進一步做研究。例如高通近幾年一直在進行的研究之一,就是量化技術。
量化能在不降低運算精度的情況下,給AI模型做個“瘦身”,讓它們以更低的功耗在手機上運行,目前相關論文已經有不少發表在NeurIPS等頂會上。

這也是驍龍8的第7代AI引擎提升4倍性能的秘訣之一。
AI性能提升的結果,就是幫助廠商們在後台不經意塞下了更多AI算法。
例如,小米12 Pro就用AI來降低屏幕發出的****有害藍光,同時還要保持顏色呈現自然。在護眼模式下,這個算法需要一直在後台運行;
又像moto edge X30搭載moto AI麗音技術,專門用來進行通信和錄音降噪,而這會在打電話、搞視頻會議等通信場景下持續運算;
再或是像AI自流暢引擎、智能充電這種“感知不到”的AI技術,實時運算背後都有驍龍8的加持。
再例如各手機中的智能語音助手、場景感知等功能,其實都或多或少需要AI算力,在分配資源、確保算法流暢運行的情況下,驍龍8同樣起到了不少作用。
不過,你以為這就是驍龍8的全部AI能力了嗎?
Nonono。
這些能力還有待“榨乾”
事實上,驍龍8支持的很多AI功能還可以繼續挖掘。
例如,最新推出的手遊AI超分辨率。
事實上,這也一直是備受手遊玩家們期待的技術之一。
畢竟原本手遊在遇到戰鬥場景、或是需要高幀率運行的複雜場景時,基本都會出現掉幀、畫質下降的情況,來維持遊戲運行的流暢性,但手機超分辨率就能解決這一問題。
這項技術,有點像是應用於端遊的深度學習超級採樣技術(DLSS),利用AI提取渲染場景的多維特徵,智能地組合多幀畫面中的細節,構造高質量畫面。
這樣,手機運行遊戲時,既能提升畫質、又能確保遊戲性能的穩定,最終提升遊戲體驗感:

不止是遊戲。
如果能將AI超分辨率成功調教到手機中,你甚至能看到更清晰的直播、更高質量的特效拍照等應用。

除了超分辨率以外,同樣值得挖掘的還有“自動鎖屏”功能。
當時這項功能發佈時,就有網友調侃這是“摸魚神器”,能在老闆注視手機屏幕時及時鎖屏。
具體來説,就是當它檢測到有陌生人注視着你的手機界面時,直接“黑掉”屏幕:

就是不知道老闆會不會勒令你重新打開界面(狗頭)。
這項技術是驍龍8集成的第四個ISP,有了它,能做到的還遠不止防偷窺這項功能,因為它可以讓攝像頭保持在極低功耗下運行。
當它檢測到有二維****碼,例如機場的行程碼、或是各地的健康碼時,就能更快地彈出對應的程序界面,省去了加載應用的時間。
嗯,也能在你看屏幕的時候自動解鎖界面——
沒錯,解放雙手的那種。
像是做菜的時候,即使你雙手都抽不出身,也能通過人臉解鎖手機,查看對應的菜譜應用。

不僅如此,驍龍8還支持同時運算多個CV算法模型,也能用來玩出更多有意思的特效拍照等應用。

除了上述這些技術以外,驍龍8還給合作廠商集成了各類開發AI功能的工具和模型合集。
包括谷歌Vertex AI NAS功能、開源的AIMET等量化工具、以及抱抱臉支持的數千個超快NLP模型等,都還有待廠商們去發掘。
未來,我們或許也能在更多新機上看見這些AI功能。
看完這些已經落地、或是可能即將落地的AI應用,你最喜歡哪一個、或期待什麼功能實現呢?