人臉識別是計算機視覺(CV)技術(shù)的一項重要分支研究,人類試圖讓機器讀懂人類面部特征,從而得到表情甚至眼神和深層次情感信息,幫助建立一個人工智能系統(tǒng),其運用在現(xiàn)今興起的VR/AR/MR的領(lǐng)域,尤其是虛擬線上社交領(lǐng)域的結(jié)合上,例如現(xiàn)今流行的各種AR變臉社交軟件,讓人們的照片和自拍瞬間變得有趣;以及虛擬Avatar的實時掃描建模,能夠幫助用戶快速構(gòu)建自己的虛擬形象。用攝像頭捕捉人臉,將其與另一個虛擬形象綁定合成放入VR系統(tǒng)中,就變成了另外一個自己;或是把真人從視頻背景當中分離出來,將其傳送到任何一個場景中。未來創(chuàng)造一個能夠全方位讀懂主人行為的虛擬人工智能助手也不是沒有可能。
今年下半年,社交巨頭Facebook收購了面部識別公司FacioMetrics,蘋果不斷申請VR/AR專利,也在不斷收購AI、CV領(lǐng)域的科技公司,在去年收購Turi后,蘋果又收購了印度機器學習公司Tuplejump。也有很多專注于人臉識別的小型公司將其API和SDK提供給其他公司,比如為很多互聯(lián)網(wǎng)金融軟件提供人臉識別安全驗證方面的技術(shù)服務。
人們分享交流的方式在不斷變化,通過人臉識別等技術(shù)實現(xiàn)的類似面具的效果,讓人們互動更加創(chuàng)意和有趣,更能激發(fā)用戶交互的興趣。VR社交系統(tǒng)研發(fā)商BeanVR(www.beanvr.com)正在申請專利的基于臉部識別的多維社交系統(tǒng),在即將發(fā)布會的VR社交應用平臺中,開設(shè)MR互動直播間,通過真人主播端和虛擬觀眾端雙端跨屏功能,通過人臉識別算法,將主播端表現(xiàn)圖像與虛擬人物模型特征點進行關(guān)聯(lián),實現(xiàn)真人主播表情實時同步其虛擬形象之上,進而在MR直播社交玩法基礎(chǔ)上添加角色扮演的功能,吸引龐大的二次元愛好群體。
另外BeanVR(www.beanvr.com)對于CV技術(shù)的應用,可以將直播流視頻流中的真人主播進行摳像并與虛擬場景融合,除了視覺效果更加逼真外,VR用戶的參與感和跨屏式感官體驗方式也將實現(xiàn)顛覆與突破。