6月20日，手機(jī)QQ正式上線“QQ-AR穿越賽場(chǎng)”活動(dòng)，打開手機(jī)QQ掃一掃進(jìn)入活動(dòng)，用指尖在攝像頭前或屏幕上的指定區(qū)域“畫圈”，即可開啟“AR任意門”，在現(xiàn)實(shí)場(chǎng)景與虛擬賽場(chǎng)之間穿梭，360度全景觀看虛擬賽場(chǎng)。這種玩法應(yīng)用手機(jī)QQ和騰訊音視頻實(shí)驗(yàn)室共同研發(fā)的畫圈手勢(shì)AI識(shí)別跟蹤技術(shù)、VIO(視覺慣性里程計(jì))、全景視頻播放等多項(xiàng)黑科技，在技術(shù)解決方案、功能體驗(yàn)兩個(gè)方面均實(shí)現(xiàn)了世界首創(chuàng)。
畫圈召喚“任意門” QQ-AR穿越球賽現(xiàn)場(chǎng)
擁有“世界第一運(yùn)動(dòng)”美譽(yù)的足球，一直以來都是深受年輕人喜愛的熱門運(yùn)動(dòng)。QQ選擇將足球運(yùn)動(dòng)與AR黑科技結(jié)合，并通過“穿越賽場(chǎng)”、“360度全景體驗(yàn)”以及虛擬互動(dòng)的打造，再一次刷新了用戶對(duì)于AR玩法的體驗(yàn)。
據(jù)了解，觸發(fā)“QQ-AR穿越賽場(chǎng)”玩法需要通過一個(gè)核心手勢(shì)——“畫圈”，這是基于手機(jī)QQ與騰訊音視頻實(shí)驗(yàn)室聯(lián)合推出的“手勢(shì)AI識(shí)別跟蹤”技術(shù)支持實(shí)現(xiàn)的。打開最新版本手機(jī)QQ掃一掃，點(diǎn)擊“QQ-AR穿越賽場(chǎng)”圖標(biāo)進(jìn)入玩法界面，根據(jù)手機(jī)屏幕提示，伸出手指在后置攝像頭前或手機(jī)屏幕上的指定區(qū)域，完成“畫圈”動(dòng)作即可開啟“任意門”。
透過“任意門”，隱約可以看到綠茵球場(chǎng)、紅衣隊(duì)員、現(xiàn)場(chǎng)觀眾，手持手機(jī)向前走就能在現(xiàn)實(shí)場(chǎng)景與虛擬賽場(chǎng)來回穿梭。“邁過”任意門進(jìn)入虛擬世界后，還能調(diào)整手機(jī)攝像頭360度全景觀看，很真實(shí)具有代入感。
以“QQ全明星隊(duì)員”身份進(jìn)入虛擬賽場(chǎng)后，點(diǎn)擊“加入球賽”還可以參與趣味互動(dòng)：在一段激烈比賽后，你的一個(gè)任意球罰球?qū)Q定最終勝負(fù)…互動(dòng)之后還會(huì)生成關(guān)于此次球賽的魔法報(bào)快訊以及精彩進(jìn)球視頻，可以分享給好友或者保存本地。
玩法、技術(shù)雙首創(chuàng) QQ任意門“圈住”年輕人
近年來，隨著AR技術(shù)識(shí)別文字、圖像、手勢(shì)等能力的不斷增強(qiáng)，各種新的內(nèi)容、玩法層出不窮。“QQ-AR穿越賽場(chǎng)”玩法將手勢(shì)AI識(shí)別跟蹤技術(shù)、VIO(視覺慣性里程計(jì))技術(shù)以及全景視頻播放AR技術(shù)等多項(xiàng)黑科技結(jié)合，帶來跨越現(xiàn)實(shí)和虛擬世界的AR體驗(yàn)，實(shí)現(xiàn)了技術(shù)上的世界首創(chuàng)。
具體來說，“QQ-AR穿越賽場(chǎng)”玩法基于手機(jī)QQ和騰訊音視頻實(shí)驗(yàn)室聯(lián)合推出的、業(yè)內(nèi)首次“手勢(shì)AI識(shí)別跟蹤”技術(shù)實(shí)現(xiàn)：當(dāng)用戶手指在攝像頭前揮動(dòng)時(shí), 通過在終端運(yùn)行級(jí)聯(lián)神經(jīng)網(wǎng)絡(luò)計(jì)算，獲取用戶指尖的位置信息，得到指尖的運(yùn)動(dòng)軌跡，并記錄和擬合判斷是否畫圈成功。判斷畫圈成功后，再采用三維重建定位跟蹤技術(shù)，將虛擬的魔法門增強(qiáng)顯示到現(xiàn)實(shí)場(chǎng)景中，讓用戶可以穩(wěn)定、準(zhǔn)確的在真實(shí)世界和虛擬世界來回穿梭。
音視頻實(shí)驗(yàn)室的手勢(shì)AI識(shí)別跟蹤技術(shù)在模型設(shè)計(jì)與前饋計(jì)算兩個(gè)層面對(duì)體驗(yàn)進(jìn)行優(yōu)化。模型層面，通過蒸餾、剪枝等多種方法優(yōu)化網(wǎng)絡(luò)模型，在最大限度保證高精度的前提下降低模型復(fù)雜度，在性能、準(zhǔn)確率和誤識(shí)別之間取得了一個(gè)較好的平衡;在前饋計(jì)算層面,通過在CPU指令級(jí)別優(yōu)化終端前饋計(jì)算性能，最終結(jié)合模型，實(shí)現(xiàn)了具有良好精度,實(shí)時(shí)的性能表現(xiàn)以及最大程度設(shè)備兼容性的指尖運(yùn)動(dòng)軌跡追蹤。
不僅在技術(shù)上進(jìn)行了創(chuàng)新突破，“QQ-AR穿越賽場(chǎng)”玩法在創(chuàng)意玩法上將多項(xiàng)黑科技與體育運(yùn)動(dòng)結(jié)合創(chuàng)造“穿越賽場(chǎng)”的效果，將熱愛運(yùn)動(dòng)的年輕用戶從體育賽事的旁觀者轉(zhuǎn)變?yōu)橘悎?chǎng)的參與者，也尚屬世界首例。
作為國(guó)內(nèi)重要的年輕人社交平臺(tái)，QQ擁有超過六成的年輕用戶，他們追求個(gè)性、科技的玩法體驗(yàn)。因此，QQ運(yùn)用平臺(tái)、科技優(yōu)勢(shì)，首次把多項(xiàng)黑科技與體育運(yùn)動(dòng)結(jié)合，打造“任意門”穿越、趣味互動(dòng)等體驗(yàn)，符合他們對(duì)于AR體驗(yàn)科技、炫酷的期待，以及將黑科技融入日常生活的需求。一方面，QQ的AR任意門能夠“圈住”求新的年輕人;另一方面，年輕人樂于分享的特點(diǎn)，也讓“AR任意門”這一玩法通過社交關(guān)系鏈，迅速拓展到更多的領(lǐng)域和群體，反哺整個(gè)AR行業(yè)的發(fā)展。
