突然之間，英特爾開始對VR/AR/MR熱情起來。在2016年IDF大會(huì)上，英特爾披露了VR計(jì)劃的細(xì)節(jié)，包括Project Alloy VR頭盔，RealSense 400 Series攝像頭以及主流頭盔顯示器(Helmet-Mounted Displays，以下簡單HMD)的開發(fā)規(guī)格，所有這一切都有微軟的參與。英特爾悄悄提出一些有待證明的概念，隨后，英特爾又發(fā)起一連串收購，增強(qiáng)深度學(xué)習(xí)技術(shù)，而深度學(xué)習(xí)與VR/AR/MR有著密切的關(guān)系。
這些東西只是原材料，英特爾要用它們制作一頓大餐。今天我們就來深入分析一下英特爾的戰(zhàn)略，包括已知的，我們認(rèn)為自己知道的，以及存在懷疑的。在整個(gè)計(jì)劃中有兩大重要部分，它們就是英特爾正在開發(fā)的兩種頭盔，微軟在兩款頭盔中都扮演了重要角色。
Project Alloy VR頭盔
有一點(diǎn)要先說清楚，在今年的IDF大會(huì)上，英特爾并沒有真正演示Project Alloy。沒錯(cuò)，在主題演講中，英特爾的確在講臺(tái)上演示了頭盔，但是它并沒有安裝最終版RealSense攝像頭，我們也沒有機(jī)會(huì)親自試用Alloy。
不管處在何種階段，Project Alloy與Rift、Vive和HoloLens都是不同的。一些企業(yè)為了宣傳自己的技術(shù)發(fā)明了許多“術(shù)語”，我注意到，英特爾將Project Alloy稱為“混合現(xiàn)實(shí)(MR)”頭盔。Project Alloy與Rift、Vive很相似，但是前面安裝了RealSense攝像頭，可以實(shí)時(shí)掃描真實(shí)世界，在頭盔內(nèi)部重新生成圖像。如此一來，你可以“看見”真實(shí)世界。事實(shí)上，英特爾的頭盔是一個(gè)“貫穿”系統(tǒng)，微軟HoloLens安裝了清晰的鏡頭，可以透過它看到真實(shí)世界，英特爾Alloy卻是復(fù)制真實(shí)世界，然后展現(xiàn)給你看。
Project Alloy是一臺(tái)完全獨(dú)立的設(shè)備。簡單來講，頭盔內(nèi)部安裝了PC，沒有外部線纜連接。我們還不清楚頭盔的具體規(guī)格，只知道它運(yùn)行的是Core i5或者i7 Skylake處理器，沒有獨(dú)立GPU。在英特爾的幻燈片中還提到了“傳感協(xié)處理器”，照猜測，它只是視覺處理器的另一種說法。這點(diǎn)無法確認(rèn)，但是照我們的猜測，這塊芯片是Movidius制造的，或者未來會(huì)由Movidius制造。
微軟開發(fā)了一款HPU，這是一款特殊視覺處理器，專門針對HoloLens。英特爾Alloy不太可能采用微軟的HPU。最近英特爾收購了Movidius公司，它很可能會(huì)使用該公司提供的VPU。Movidius已經(jīng)推出Myriad2 VPU，大家都認(rèn)為它還會(huì)發(fā)布新的芯片，Alloy可能安裝的就是這種芯片。另外，英特爾Alloy配備的是Windows 10操作系統(tǒng)，從本質(zhì)上看它就是一臺(tái)PC，披上了Windows Holographic外衣。這也是再明顯不過的事，畢竟英特爾與微軟在Project Alloy上密切合作。
在合作方面英特爾有點(diǎn)謹(jǐn)慎，它曾表示，2017年的主流PC都可以運(yùn)行Windows Holographic。不論怎樣，Project Alloy內(nèi)置的PC肯定屬于“主流”產(chǎn)品，它執(zhí)行運(yùn)算任務(wù)，凡是HoloLens能夠提供的體驗(yàn)，Project Alloy都能提供。HoloLens也是一款獨(dú)立設(shè)備，它安裝的是性能稍差的Cherry Trail芯片。
要理解Project Alloy與其它頭盔的區(qū)別，可以參閱下述資料：
——Rift/Vive/OSVR：VR頭盔，需要獨(dú)立PC系統(tǒng)，有線，閉塞體驗(yàn)，非穿透式系統(tǒng)。
——索尼PSVR：VR頭盔，需要PS4支持，有線，閉塞體驗(yàn)，非穿透式系統(tǒng)。
——微軟HoloLens：AR/MR頭盔，獨(dú)立設(shè)備，無線，非閉塞體驗(yàn)，穿透式系統(tǒng)。
——英特爾Project Alloy：VR/AR/MR頭盔，獨(dú)立設(shè)備，無線，閉塞體驗(yàn)，穿透式系統(tǒng)。
——移動(dòng)VR(三星Gear VR和DayDream)：VR頭盔，需要獨(dú)立智能手機(jī)支持，無線，閉塞體驗(yàn)，非穿透式體驗(yàn)。
有一個(gè)問題讓人困惑：如果Project Alloy是完全閉塞的頭盔，如何使用Holograhic技術(shù)?為什么使用該技術(shù)?所謂的全息，就是將全息圖像放置在真實(shí)世界中(相當(dāng)于混合現(xiàn)實(shí))。另外，HoloLens的顯示屏技術(shù)只是用來投射圖像的，不干其它事，看起來這點(diǎn)與全封閉頭盔存在矛盾——比如Project Alloy。
另外，如果全息圖對GPU的要求不高，將它放進(jìn)頭盔顯示屏應(yīng)該不是什么難事，如此一來頭盔就可以形成一片虛擬空間，將全息圖放進(jìn)去。英特爾與微軟都明確表示，通過雙方的合作，在給定的XR(指VR、AR、MR等多種技術(shù))環(huán)境中既可以支持2D應(yīng)用，也可以支持3D應(yīng)用，包括Windows中已有的一些應(yīng)用。
正如我所指出的，英特爾的頭盔雖然封閉，但是此封閉并非真正的封閉。通過RealSense攝像頭，系統(tǒng)可以穿透真實(shí)世界，這點(diǎn)正是Project Alloy最有趣的地方。
RealSense 400 Series和深度學(xué)習(xí)
我們現(xiàn)在已經(jīng)稍稍了解Project Alloy的內(nèi)部細(xì)節(jié)，但是關(guān)于最新的RealSense攝像頭我們還不熟悉，也就是400 Series攝像頭。英特爾是否已經(jīng)最終確定?我表示懷疑。在IDF展臺(tái)上，以及本周的RealSense會(huì)議上，英特爾的確展示了RealSense攝像頭，但是關(guān)于新工具包的具體規(guī)格我們一無所知。
盡管如此，RealSense攝像頭的功能相當(dāng)強(qiáng)大。在IDF展示過程中，英特爾視知覺運(yùn)算集團(tuán)總經(jīng)理、副總裁Achin Bhowmik曾表示，RealSense的目標(biāo)就是模擬人類的感知系統(tǒng)，既有視力系統(tǒng)也有前庭錯(cuò)覺系統(tǒng)。
這是一個(gè)偉大的目標(biāo)，英特爾正在朝目標(biāo)邁進(jìn)。最新的RealSense 400 Series讓英特爾離目標(biāo)更近一步。根據(jù)Achin Bhowmik的介紹，新攝像頭比前代產(chǎn)品更加精準(zhǔn)，既可以在室內(nèi)使用，也可以在室外使用，它的體積更小，重量更輕，設(shè)計(jì)更富彈性，可以用在不同的產(chǎn)品中。
將RealSense 400 Series攝像頭與Alloy搭配，就可以通過VPU提供6DoF(六自由度)手部和身體虛擬化/追蹤功能，還可以用3D形式掃描對象和空間，例如，你可以與對象互動(dòng)，不會(huì)撞到它。HoloLens的運(yùn)行原理與英特爾不同，在使用之前，HoloLens先要掃描、了解房間，然后才能將對象放在房間內(nèi)，RealSense承諾可以實(shí)時(shí)(或者接近實(shí)時(shí))呈現(xiàn)運(yùn)動(dòng)，追蹤運(yùn)動(dòng)，覆蓋范圍達(dá)到幾個(gè)房間。另外，它還可以讓多人進(jìn)入同一片虛擬空間，讓個(gè)體與全息圖互動(dòng)。
英特爾已經(jīng)圍繞該功能開發(fā)一段時(shí)間了。在一年前的IDF上，英特爾用OSVR頭盔展示技術(shù)，當(dāng)時(shí)頭盔安裝的是Leap Motion攝像頭。后來英特爾遠(yuǎn)離了這兩家企業(yè)，用RealSense攝像頭替代Leap Motion攝像頭，用自己的頭盔替代OSVR頭盔。在今年年初的MWC上，英特爾用Project Tango來展示手部、對象虛擬化技術(shù)。請注意，不是“追蹤”，而是“虛擬化”。幾周前，我們看到英特爾的深度攝像頭安裝在HTC Vive上。緊接著，英特爾展示了Project Alloy。RealSense攝像頭雖然很強(qiáng)大，但是真正值得重視的卻是深度學(xué)習(xí)。
深度學(xué)習(xí)是AI的組成部分，而AI正是英特爾密切關(guān)注的領(lǐng)域。如何將Project Alloy、RealSense 400系列攝像頭與AI聯(lián)系起來?答案其實(shí)簡單得多。簡單來講，深度學(xué)習(xí)有兩個(gè)部分：一是訓(xùn)練，二是推斷。
訓(xùn)練部分需要龐大的資源支持，它就是大數(shù)據(jù)，與超級計(jì)算有關(guān)。至于推斷部分，用低性能計(jì)算機(jī)就可以完成。例如，Movidius開發(fā)了Fathom神經(jīng)運(yùn)算棒，它可以在一根棒子上提供深度學(xué)習(xí)功能。
像Fathom這樣的設(shè)備(在小小的設(shè)備內(nèi)植入芯片)可以加載神經(jīng)網(wǎng)絡(luò)，需要的空間只有幾十兆。這些神經(jīng)網(wǎng)絡(luò)已經(jīng)訓(xùn)練過，當(dāng)設(shè)備“看到”對象、人、動(dòng)物或者空間，就可以自動(dòng)解釋，它不單知道什么是狗，還能知道這條狗是不是金毛獵犬。
裝載神經(jīng)網(wǎng)絡(luò)的設(shè)備還有一個(gè)優(yōu)點(diǎn)：運(yùn)行時(shí)不必依賴云連接，它們已經(jīng)接受過訓(xùn)練。在“觀察”世界的過程中，神經(jīng)網(wǎng)絡(luò)還可以不斷學(xué)習(xí)，它會(huì)將數(shù)據(jù)送回到云端，讓訓(xùn)練可以更好地進(jìn)行。數(shù)據(jù)越多，訓(xùn)練越好，網(wǎng)絡(luò)越聰明，到時(shí)我們就可以將神經(jīng)網(wǎng)絡(luò)下載到設(shè)備，讓整個(gè)系統(tǒng)一直循環(huán)下去。
英特爾既收購了Movidius，它生產(chǎn)視覺芯片，還收購了深度學(xué)習(xí)、AI公司Nervana Systems，也就是說英特爾同時(shí)擁有了兩大組件。
回到Project Alloy頭盔，它可以將神經(jīng)網(wǎng)絡(luò)與RealSense 400 Series搭配使用，其潛力不可估量。
無名的主流XR HMD
事實(shí)上，Project Alloy并不是英特爾正在開發(fā)的唯一一款頭盔。英特爾不愿意過多談?wù)摚歉鶕?jù)我們與英特爾的對話，從中可以找到一些支離破碎的線索，將它們拼湊在一起。從本質(zhì)上講，英特爾要征服的不只是頭盔市場。
Project Alloy是一款獨(dú)立的頭盔，因?yàn)閷?shí)時(shí)繪圖和追蹤而具備“穿透”功能。英特爾還在開發(fā)另一款頭盔，針對的是主流市場，它采用全封閉設(shè)計(jì)，可以與PC、Windows兼容。從微軟的口吻、英特爾代表透露的信息來看，英特爾可能會(huì)推出類似HoloLens這樣的設(shè)備。關(guān)于第二款頭盔，英特爾甚至沒有取名，沒有項(xiàng)目代號，它只是一個(gè)創(chuàng)意，一種戰(zhàn)略，一個(gè)概念。在這款未命名的產(chǎn)品上，英特爾與微軟密切合作。
從表面上看，這款頭盔更加接近Rift、Vive，而不是Project Alloy，它會(huì)采用VR封閉設(shè)計(jì)，作為PC外設(shè)使用，它會(huì)成為一款主流設(shè)備。在XR市場英特爾看到了一個(gè)巨大的“黑洞”，也就是移動(dòng)設(shè)備(比如Gear VR)與高端頭盔(Rift、Vive)留下的空白地帶。
這款設(shè)備會(huì)帶來怎樣的體驗(yàn)?英特爾VR卓越中心主管Kim Pallister表示：“用戶需要更便宜的解決方案，盡管價(jià)格更低，并不意味著配置糟糕，因?yàn)榕渲锰铙w驗(yàn)也會(huì)很差。必須在某種程度上改變管道。”
說來容易做來難，英特爾會(huì)利用自己的特長來解決此問題，它的特長就是“處理器”。
雖然現(xiàn)在還沒有具體的消息，但是據(jù)我們所知，英特爾準(zhǔn)備從CPU上剔除一些任務(wù)，只為解決XR問題。在現(xiàn)有的PC平臺(tái)上，英特爾工程師已經(jīng)與一些游戲開發(fā)者合作，開發(fā)相應(yīng)的處理器，它可以緩解GPU在VR上的壓力。通過實(shí)驗(yàn)，英特爾也在為頭盔尋找辦法，提供相似的“援助”。
“除了在頭盔上安裝一些傳感器，做一些傳感器整合式工作，還有一種理論我們正在進(jìn)行概念證明，讓頭盔自己處理一些任務(wù)，比如桶形畸變(barrel distortion)、時(shí)間扭曲(time warp)、色誤差糾正，這樣做可能會(huì)有更大的優(yōu)勢。” Kim Pallister表示，“采用這種方法，執(zhí)行任務(wù)時(shí)可以更加接近傳感器，獲得傳感器數(shù)據(jù)、更新時(shí)間扭曲會(huì)更快，減輕分辨率、幀速率的震動(dòng)。”
“你可以快速更新頭盔和時(shí)間扭曲，用不同的幀速率模擬運(yùn)行。”Kim Pallister說。他對目前英特爾取得的進(jìn)展相當(dāng)滿意，相信公司可以從低性能硬件上榨取更好的VR體驗(yàn)。
在英特爾前進(jìn)的道路上存在障礙，正因如此，它需要微軟的幫助。
英特爾與微軟
“與微軟的合作分兩大部分。”Pallister表示，“合作有一個(gè)任務(wù)，那就是為PC、頭盔設(shè)定一套規(guī)格，它們相互協(xié)調(diào)，為Windows Holographic Windows Shell提供一套主流解決方案，我們謹(jǐn)慎使用‘主流解決方案’這一說法，我們還會(huì)提供一套API，讓大量PC可以支持VR。”
換言之，英特爾看中的是單一、主流VR頭盔。英特爾嘗試引入一個(gè)全新的生態(tài)系統(tǒng)，它要與微軟合作，讓軟件OS與硬件緊密結(jié)合。英特爾還會(huì)向其它公司提供硬件，其它公司會(huì)制造終端用戶產(chǎn)品。
也許你已經(jīng)發(fā)現(xiàn)，在CPU市場上英特爾正是這樣做的。在市場上你買不到英特爾PC，同樣的，你也不能買到英特爾VR頭盔。既然如此，為什么英特爾還要開發(fā)頭盔?
英特爾會(huì)不會(huì)進(jìn)入頭盔市場?Pallister很快否定了這一說法。“我們開發(fā)原型產(chǎn)品，進(jìn)行概念證明，做眾多的事情，但是我們并不需要進(jìn)入市場。”
Pallister表示，“就目前的情況來看，我們更希望能促進(jìn)產(chǎn)業(yè)的發(fā)展……而不是進(jìn)入任何垂直業(yè)務(wù)。”他還說，原型產(chǎn)品既是為英特爾工程師開發(fā)的，還為產(chǎn)業(yè)合作伙伴提供豐富的知識(shí)。英特爾工程師可以知道Core處理器、圖形芯片在系統(tǒng)層面的要求。Pallister補(bǔ)充說：“為什么與微軟開發(fā)兩套設(shè)備(一套是Alloy，一套是主流VR頭盔)?因?yàn)閂R是一款高性能產(chǎn)品，對延遲很敏感，我們不能說：‘嗨，我做完了這一層，剩下的交給你。’你必須提供更嚴(yán)密的解決方案，然后由此開始發(fā)展下去。”
我們可以將Daydream VR平臺(tái)與英特爾平臺(tái)對比，谷歌同樣沒有興趣制造頭盔。Daydream只是一個(gè)平臺(tái)，可以讓OEM企業(yè)制造自己的VR設(shè)備。
聽起來這就是英特爾對XR的看法，Pallister表示認(rèn)同，他隨后輕輕一笑。Pallister說：“用手機(jī)硬件生態(tài)系統(tǒng)替代PC生態(tài)系統(tǒng)，用Android和DayDream替代Windows和Windows Holographic。”兩款產(chǎn)品的目標(biāo)是一致的：讓產(chǎn)品大眾化、商品化，讓VR成為一種便宜的高質(zhì)量體驗(yàn)，可以輕易獲得。
這只是第一步，只是制造了產(chǎn)品。從科技產(chǎn)業(yè)多年的發(fā)展經(jīng)驗(yàn)來看，內(nèi)容也是相當(dāng)重要的。關(guān)于這個(gè)問題Pallister并不擔(dān)心，如果“Wintel”聯(lián)盟按預(yù)期發(fā)展，內(nèi)容早就已經(jīng)存在。Pallister解釋稱：“和微軟HoloLens相似，你可以將Win32 APP和內(nèi)容引進(jìn)到VR領(lǐng)域，通過某種方式與它們互動(dòng)。開發(fā)者為Windows Holographic開發(fā)了內(nèi)容(面向HoloLens)，這些內(nèi)容也可以引進(jìn)來，包括封閉頭盔Windows Holographic Shell，這是另一個(gè)內(nèi)容源，我們可以從中獲得內(nèi)容。”
今年12月，第一套針對頭盔的英特爾、微軟規(guī)范就會(huì)確定。
總體規(guī)劃
談了這么多，XR“理想國”到底是怎樣的?雖然知道這么多，但是英特爾的XR戰(zhàn)略仍然是朦朧的。
英特爾不會(huì)自己制造銷售Alloy頭盔，它正在打造一個(gè)Alloy平臺(tái)，其它企業(yè)以此為基礎(chǔ)開發(fā)可以銷售的產(chǎn)品。英特爾也不會(huì)開發(fā)、銷售主流VR頭盔，它的性能比Rift、Vive低。英特爾會(huì)開發(fā)技術(shù)，還可能會(huì)開發(fā)原型產(chǎn)品，形成知識(shí)產(chǎn)權(quán)，微軟及其它企業(yè)會(huì)以此為基礎(chǔ)開發(fā)正式銷售的產(chǎn)品。
