當(dāng)?shù)貢r(shí)間10月24日-26日,2023驍龍峰會(huì)在夏威夷隆重舉辦。在首日峰會(huì)上,高通全新旗艦產(chǎn)品驍龍8 Gen 3正式發(fā)布,成為現(xiàn)場的主角。值得一提的是,為能夠在手機(jī)芯片本地運(yùn)行AI大模型,驍龍8 Gen 3大幅提高了芯片的AI能力,攜手合作伙伴開啟了手機(jī)生成式AI的新時(shí)代。
慧鯉作為高通在人工智能領(lǐng)域重要的合作伙伴現(xiàn)身峰會(huì),在首日的主會(huì)場 Keynote環(huán)節(jié)和次日的移動(dòng)專場(Mobile Spotlight)中,分別通過現(xiàn)場DEMO展示了生成式AI領(lǐng)域的視野拓展、人像超分功能,以及視覺3D重建能力等最新技術(shù)成果。依托驍龍8 Gen 3的能力,將領(lǐng)先的大模型和生成式AI賦能到手機(jī)端,為手機(jī)用戶提供影像拍攝等高質(zhì)量極致體驗(yàn)。
把大模型塞進(jìn)手機(jī),重新定義移動(dòng)智能時(shí)代
隨著生成式AI技術(shù)和應(yīng)用的發(fā)展,實(shí)現(xiàn)移動(dòng)端的AI技術(shù)支持,尤其是AI大模型在手機(jī)端的落地,顯得愈發(fā)關(guān)鍵。對手機(jī)芯片來說,能夠在本地高速運(yùn)行人工智能大模型,也成為了核心訴求。高通此次全新發(fā)布的驍龍8 Gen 3也將AI能力作為重中之重。
在首日的主會(huì)場 Keynote環(huán)節(jié)上,高通公司全球副總裁侯明娟介紹了 8 Gen 3的眾多強(qiáng)悍性能,并現(xiàn)場對慧鯉的人工智能Demo進(jìn)行演示,呈現(xiàn)高通最新一代手機(jī)芯片與生成式AI結(jié)合的真實(shí)效果。
高通與慧鯉深度合作
在此次與高通的深度合作中,慧鯉通過將AI技術(shù)與芯片能力進(jìn)一步深度融合,實(shí)現(xiàn)了生成式AI在手機(jī)本地完全運(yùn)行,并在手機(jī)端完成高質(zhì)量的生成和交互。這不僅讓AI交互無需再聯(lián)網(wǎng)上傳到云端,也讓隱私數(shù)據(jù)泄露的風(fēng)險(xiǎn)明顯降低。更關(guān)鍵的是,這也大大降低了自然語言交互和相關(guān)應(yīng)用的門檻。
顯而易見,在共同推進(jìn)技術(shù)進(jìn)步的路上,慧鯉與高通正在重新定義當(dāng)下的移動(dòng)智能時(shí)代。
生成式AI賦能視野擴(kuò)展、人像超分黑科技
生成式AI在移動(dòng)端的深度應(yīng)用展示,是此次驍龍峰會(huì)的最大亮點(diǎn)。慧鯉也是峰會(huì)首日唯一進(jìn)行現(xiàn)場展示的生成式AI技術(shù)企業(yè)。全新驍龍8 Gen 3的支持,讓手機(jī)在智能影像層面實(shí)現(xiàn)了“視野擴(kuò)展”與“人像超分”兩大重磅升級。
視野拓展DEMO
其中,視野擴(kuò)展核心邏輯是通過慧鯉生成式AI技術(shù),在手機(jī)端拍攝過程中完成邊緣視野的自動(dòng)拓展?，F(xiàn)場展示中,手機(jī)端可在數(shù)秒內(nèi)迅速給出大模型生成結(jié)果?；趶?qiáng)大的生成式AI,過程中可以進(jìn)行邊界畫質(zhì)的自動(dòng)優(yōu)化,擺脫了生成區(qū)域畫質(zhì)大幅退化的問題,不僅確保生成內(nèi)容與原圖的合理性和一致性,也讓畫面更自然協(xié)調(diào)。
慧鯉視野拓展
人像超分則是針對手機(jī)人像拍照的又一項(xiàng)黑科技。基于此功能,在畫面拍攝定格后,生成式AI可以在手機(jī)端進(jìn)行人像清晰度的增強(qiáng)和去模糊,并實(shí)時(shí)呈現(xiàn)畫面效果。這項(xiàng)功能可廣泛適用于各種復(fù)雜拍攝場景,比如成片后分辨率較低、畫質(zhì)壓縮受損、畫面失焦、運(yùn)動(dòng)模糊等,讓每一張人像都可實(shí)現(xiàn)清晰度還原。
RGBD快、穩(wěn)、省,釋放三維影像力
除了生成式AI領(lǐng)域,慧鯉還與高通在感知視覺領(lǐng)域祭出大招,展示了最新的RGBD深度圖補(bǔ)全算法,實(shí)現(xiàn)快速、穩(wěn)定、省電,釋放三維視覺的強(qiáng)悍影像力,進(jìn)一步解鎖移動(dòng)端智能3D建模成像的高級玩法。
通過現(xiàn)場的DEMO展示,全新的RGBD深度圖補(bǔ)全可以在16毫秒內(nèi)完成快速推理,并將生成誤差控制在0.1%,同時(shí)也實(shí)現(xiàn)了更低功耗。
與此同時(shí),RGBD通過深度融合RGB和Spot depth信息,可生成更精確的稠密深度圖,賦予手機(jī)ToF攝像頭更遠(yuǎn)的距離、更低的功耗、更高的信噪比和更全的深度信息。
這也讓驍龍8 Gen 3在ToF拍攝方面具備了三大優(yōu)勢。一是“高保真”,生成式AI大模型讓RGBD拍攝更接近真實(shí),可以保持原有硬件sensor的精度;二是“容錯(cuò)強(qiáng)”,拍攝過程中容許少量的對齊誤差、離群點(diǎn)和信號噪聲;三是“實(shí)時(shí)性”,利用AI引擎實(shí)時(shí)低功耗處理,可支持60fps的幀數(shù)傳輸速度,讓拍攝所見即所得。
在移動(dòng)端AI應(yīng)用浪潮下,慧鯉和高通以智能影像為突破口,讓生成式AI在手機(jī)端完美落地。同時(shí),配合感知技術(shù)的更新迭代,不但展示了AI的智慧魅力,也深度挖掘出了高通新一代先進(jìn)芯片的性能潛力。面對人工智能領(lǐng)域的應(yīng)用需求,慧鯉還將繼續(xù)與高通等廠商攜手,加速創(chuàng)新與突破,讓生活更便利更安心。
