隨著虛擬現(xiàn)實(shí)的火熱，VR社交這一概念也被從業(yè)者們熱炒，畢竟社交作為流量的最大入口，被推到風(fēng)口浪尖也是難以避免。可事實(shí)上，流量的巨大誘惑下，從業(yè)者熱炒，卻仍然難以見到真正覺有殺傷力的VR社交內(nèi)容出現(xiàn)。正所謂萬事皆有因果，今天我們來看看VR社交雷聲轟隆響卻遲遲不下雨的原因何在。
殺手級VR社交應(yīng)用之所以到現(xiàn)在仍然未能出現(xiàn)，自然不是從業(yè)者在吊消費(fèi)者胃口，當(dāng)然也不是消費(fèi)者抵觸VR社交。VR日報(bào)一向一針見血無他，技術(shù)上有瓶頸罷了。
現(xiàn)階段的VR社交，已經(jīng)完成了針對社交對象的位置、方向、基本姿態(tài)、頭部位置等的跟蹤。這樣的VR社交，已經(jīng)可以給參與者極強(qiáng)的社交體驗(yàn)，但這只是VR社交的開始，還遠(yuǎn)遠(yuǎn)不是未來。如果將VR社交的發(fā)展分代的話，這充其量也就是個(gè)第一代而已，還只滿足了最基本的需求：可以和對方交流，能看見自己的手和對方的頭與手等等。
真正的頂級VR社交體驗(yàn)，應(yīng)該是：在虛擬環(huán)境中，你能和社交對象交流，你能看見Ta并你能感受Ta，你能感受Ta在你背后和你交流的時(shí)候在看著你，Ta微笑或悲傷的時(shí)候你能感受到Ta的不同表情，當(dāng)你轉(zhuǎn)頭的時(shí)候或注意力在某點(diǎn)上的時(shí)候，Ta能感受到你的注意力所在等等。
社交參與者在虛擬環(huán)境中獲得真實(shí)環(huán)境中一樣的體驗(yàn)，才是VR社交的殺傷力所在。
要讓VR社交火力全開的技術(shù)難點(diǎn)主要在于三個(gè)方面：
1、Avatar重現(xiàn);
2、臉部表情追蹤;
3、現(xiàn)實(shí)場景的還原。
一、Avatar重現(xiàn)
這是VR社交的最關(guān)鍵點(diǎn)，因?yàn)橐坏﹦?chuàng)造出與真實(shí)身體完全同步(延遲低到大腦自動忽略)的Avatar，社交參與者便可以通過操控身體來改變社交對象的社交感受。
Avatar重現(xiàn)需要追蹤你的臉部表情以及身體的每一個(gè)部位的反應(yīng)，而且這種追蹤與重現(xiàn)都是實(shí)時(shí)的，所以才能在技術(shù)上顯得困難重重。技術(shù)上的難點(diǎn)主要在于：追蹤與重現(xiàn)的延遲、設(shè)備(PC、一體機(jī)VR頭盔)的數(shù)據(jù)處理能力、追蹤傳感器敏感精度、社交網(wǎng)絡(luò)的帶寬等等。舉個(gè)例子說，在社交過程中，你的微笑需要被傳感器追蹤到，在設(shè)備的數(shù)據(jù)處理后，經(jīng)由高速寬帶網(wǎng)絡(luò)傳輸至社交對象的VR設(shè)備中并被在其虛擬環(huán)境中重現(xiàn)。其中的任何一個(gè)環(huán)節(jié)都不能出現(xiàn)紕漏，否則社交對象便不能獲取你們交流過程中可能致關(guān)重要的一個(gè)微笑。極致體驗(yàn)從來都是在最細(xì)節(jié)處獲取的!
微軟最新型的3D捕捉技術(shù)Holoportation，配合Hololens這樣的混合現(xiàn)實(shí)顯示設(shè)備，已經(jīng)可以實(shí)現(xiàn)人的高清3D模型實(shí)時(shí)掃描、壓縮、傳送、重構(gòu)，可以算作Avatar重現(xiàn)的一個(gè)雛形。
二、臉部表情追蹤
臉部表情的追蹤實(shí)際上是Avatar重現(xiàn)的分支，之所以單獨(dú)將其列出來就是因?yàn)槠浼夹g(shù)難度非常高。有多難呢?完整精準(zhǔn)的實(shí)現(xiàn)臉部表情追蹤，需要涉及的學(xué)科包括：CV、傳感器、機(jī)械學(xué)、電子、心理感知、機(jī)器學(xué)習(xí)、面部動畫……筆者評判一項(xiàng)技術(shù)的復(fù)雜程度向來遵循一個(gè)非常簡單的標(biāo)準(zhǔn)：涉及的學(xué)科廣度。一項(xiàng)技術(shù)涉及的學(xué)科跨度太寬，畢竟光是將各學(xué)科整合起來都不是一個(gè)簡單的事情。
南加大助理教授黎顥在一次采訪中講述了Oculus和南加大合作的SIGGRAPH(Special Interest Group for Computer GRAPHICS)計(jì)劃的產(chǎn)品，該計(jì)劃的產(chǎn)品主要用來面部識別。其中的技術(shù)要點(diǎn)不在這里一一贅述，僅向大家講述一個(gè)通俗易懂的難點(diǎn)——在VR中用戶的頭部被HMD遮擋住了，使得在VR中實(shí)現(xiàn)面部表追蹤與往常的情況不再一樣。
研究者們將上面的芯片鑲嵌在上圖中的泡沫板里(即黃色標(biāo)記部分)，通過感應(yīng)面部肌肉的抽動來捕捉你臉上部的表情，瞬間覺得好高端有木有!前面伸出的相機(jī)，原理則和往常一樣，通過鏡頭來追蹤用戶的下巴和嘴的表情。從技術(shù)上論證的話，SIGGRAPH已經(jīng)基本實(shí)現(xiàn)了在VR社交中的面部表情追蹤，但從聰明的你一眼就可以看出，這樣的設(shè)備遠(yuǎn)不能實(shí)現(xiàn)面部表情完美追蹤與重現(xiàn)。單是這個(gè)設(shè)備的外形，想必都會讓大家看的尷尬癌直犯吧，用戶的使用體驗(yàn)就更加不用說了。
三、現(xiàn)實(shí)場景的還原
VR社交的實(shí)現(xiàn)，必然是以特定的形式比如VR小游戲或者VR化的微信等等，這就涉及到了社交場景的構(gòu)建。
現(xiàn)實(shí)場景虛擬重現(xiàn)在虛擬現(xiàn)實(shí)技術(shù)中有著重要的作用，它是基于全景圖像的真實(shí)場景虛擬現(xiàn)實(shí)技術(shù)然后通過計(jì)算機(jī)技術(shù)實(shí)現(xiàn)全方位互動式觀看的真實(shí)場景還原展示方式，通過VR眼鏡可以前后左右遠(yuǎn)近的觀看能夠產(chǎn)生身臨其境的感覺。對場景的重建，勢必要求真實(shí)場景的全方位掃描、3D建模、數(shù)據(jù)傳輸、場景內(nèi)容的材質(zhì)/光線還原等等多方面的因素齊備。
淘寶即將上市的Buy+就使用虛擬現(xiàn)實(shí)技術(shù)，宣稱能100%還原真實(shí)場景，并且能夠利用TMC三維動作捕捉技術(shù)捕捉動作并觸發(fā)虛擬環(huán)境的反饋。但實(shí)際上，現(xiàn)有的技術(shù)是完全能夠做到靜態(tài)現(xiàn)實(shí)場景的虛擬現(xiàn)實(shí)還原的，難點(diǎn)在于，如何實(shí)現(xiàn)動態(tài)還原。靜態(tài)的還原撐破天也就是個(gè)街景地圖而已，能夠給予參與者的社交體驗(yàn)還遠(yuǎn)遠(yuǎn)不夠。而如果希望實(shí)現(xiàn)動態(tài)畫面，又涉及大量的3D建模工作，對于VR硬件的GPU性能也是一種考驗(yàn)。好消息是，最近，針對VR設(shè)備，AMD推出新的技術(shù)標(biāo)準(zhǔn)，包括120度視角，20ms延遲，以及16k的分辨率!
技術(shù)革新的推動力從來都是巨大紅利的誘惑，虛擬現(xiàn)實(shí)社交的到來是必然，作為流量的最大入口，即便技術(shù)難度再高，從業(yè)者總不會放棄這片巨量金礦。
想想VR化的微信，我都有些小激動呢!
