近日,聯(lián)發(fā)科攜手騰訊會議,共同宣布了一項創(chuàng)新合作的成果——專為視頻會議優(yōu)化的端側(cè)NPU虛擬背景功能,現(xiàn)已在搭載聯(lián)發(fā)科天璣系列旗艦芯片的終端設(shè)備上正式亮相。此次合作是雙方首次在芯片端側(cè)AI算力最大化方面展開的軟硬件生態(tài)聯(lián)合探索,旨在為騰訊會議用戶帶來前所未有的智能會議體驗,同時也為行業(yè)樹立了軟硬件生態(tài)深度融合的新典范。
騰訊會議的虛擬背景功能,憑借其先進(jìn)的人像分割技術(shù),能夠在視頻會議中自動辨識參會者,并將背景智能替換為用戶指定的圖像或視頻。該技術(shù)基于自建的多樣性數(shù)據(jù)集,能夠在各種應(yīng)用場景下實現(xiàn)精準(zhǔn)穩(wěn)定的人像分割,同時模型設(shè)計兼顧輕量化與高計算效率。無論用戶使用何種類型的終端設(shè)備,都能享受到流暢且精準(zhǔn)的背景替換效果。
為了充分發(fā)揮天璣旗艦芯片的AI算力優(yōu)勢,聯(lián)發(fā)科與騰訊會議共同對端側(cè)AI人像分割模型進(jìn)行了深度優(yōu)化,不僅在GPU和NPU架構(gòu)上實現(xiàn)了協(xié)同提升,還顯著提高了處理速度和能效比。聯(lián)發(fā)科通過其天璣AI開發(fā)套件NeuroPilot,為騰訊會議提供了從模型量化、轉(zhuǎn)換、編譯到集成的全方位工具鏈支持(SDK/API/document),極大地簡化了基于AI的應(yīng)用程序開發(fā)流程。
經(jīng)過雙方的緊密合作與優(yōu)化,騰訊會議在天璣9400旗艦芯片NPU上的運行表現(xiàn)相較于傳統(tǒng)的CPU FP模式,性能提升了3.5至4倍,執(zhí)行時間縮短了6毫秒,同時降低了運行功耗,延長了設(shè)備續(xù)航時間,為用戶提供了更加流暢且精準(zhǔn)的虛擬背景體驗。
聯(lián)發(fā)科最新一代旗艦芯片天璣9400集成了第八代AI處理器NPU 890,憑借強大的AI算力,能夠高效處理語音、圖像和視頻等復(fù)雜任務(wù)。天璣9400還配備了天璣AI智能體化引擎,支持端側(cè)AI應(yīng)用的廣泛部署。結(jié)合時域張量硬件加速、端側(cè)高畫質(zhì)視頻生成等前沿技術(shù),天璣9400在Stable Diffusion端側(cè)運行的性能上實現(xiàn)了2倍的提升,讓用戶能夠輕松享受高分辨率生圖生成、端側(cè)動圖和視頻創(chuàng)作等趣味功能。
聯(lián)發(fā)科表示,未來,騰訊會議與聯(lián)發(fā)科將繼續(xù)深化軟硬件生態(tài)合作,共同探索更多創(chuàng)新功能,為用戶帶來更加便捷、智能的線上會議體驗。目前,騰訊會議已經(jīng)在天璣9000、天璣9200、天璣9300以及天璣9400系列芯片賦能的多個終端設(shè)備上上線了端側(cè)NPU版本的虛擬背景功能。聯(lián)發(fā)科誠邀廣大天璣用戶下載騰訊會議App,親身體驗AI技術(shù)加持下的高效會議模式。
此次聯(lián)發(fā)科與騰訊會議的合作,不僅是一次基于實際業(yè)務(wù)場景、以用戶體驗為核心的重要移動端AI算力合作,更是雙方攜手推動行業(yè)向更高效、更智能方向發(fā)展的有力證明。通過此次合作,雙方不僅為未來功能的拓展與創(chuàng)新奠定了堅實基礎(chǔ),也展現(xiàn)了共同推動行業(yè)進(jìn)步的責(zé)任與擔(dān)當(dāng)。