Facebook和Otoy在軟件和硬件端的聯(lián)手，提出了一個(gè)徹底改變VR視頻制作和消費(fèi)的可能方向。

Facebook大會(huì)第二天，雖然小扎不出來了，但是臉書持續(xù)刷屏。F8第二天，臉書曝光了其360°視頻平臺(tái)Facebook 360的全新相機(jī)，x24和x6，從名字上能夠看出來一個(gè)足球籃球大小，一個(gè)排球大小的全景相機(jī)結(jié)構(gòu)。更神奇的是，兩臺(tái)相機(jī)結(jié)合OTOY的技術(shù)，能夠?qū)崿F(xiàn)類似于光場(chǎng)的6自由度360°視頻體驗(yàn)，并能通過Unity、Unreal、AE等軟件組成流水線進(jìn)行后期處理。

據(jù)悉，F(xiàn)acebook將會(huì)找合作伙伴來生產(chǎn)x24和x6相機(jī)，產(chǎn)品可能在今年晚些時(shí)候曝光，不過定價(jià)未知。去年Facebook推出的開源360相機(jī)陣列的價(jià)格在3萬美元左右。

相對(duì)于去年推出的360相機(jī)的雙鍋蓋造型，x24和x6采用了球型設(shè)計(jì)，而且個(gè)頭都不小，x6看起來有排球大小，x24估計(jì)有籃球大小，但是兩臺(tái)設(shè)備看起來都十分高端，不僅是渲染圖層面，實(shí)物看起來也相當(dāng)有質(zhì)感。瑞云科技的梁幸堯透露，相機(jī)本體是用超高精度5軸CNC智能機(jī)器人車床做的一體結(jié)構(gòu)，精度非常高。根據(jù)Moor Insights & Strategy的Anshel Sag透露，大一些的x24相機(jī)由知名紅外成像制造公司英國菲力爾公司（FLIR）制造，小一些的x6則由Facebook的內(nèi)部硬件團(tuán)隊(duì)制造而成。

從外觀上來說，x24和x6的看起來甚至比諾基亞的OZO更具有科技感。

帶深度信息的6 DOF視頻

目前很多公司都在嘗試解決360°視頻的6自由度問題，就是讓觀眾能夠在視頻中動(dòng)起來，前后左右能看到不同的景象，而不僅僅是轉(zhuǎn)動(dòng)頭部。其中一個(gè)解決方案就是光場(chǎng)技術(shù)，這其中比較出名的是Lytro。

不管是光場(chǎng)還是其他技術(shù)，要想做到6自由度視頻，要解決的都是如何記錄深度信息的問題。而這也是為什么Facebook會(huì)和OTOY公司聯(lián)手，因?yàn)楹笳邔⒉蹲降降?60°影像信息看成是一個(gè)信息點(diǎn)流，從中提取出足夠的深度信息，計(jì)算出一個(gè)空間范圍，讓觀眾能夠前后左右從不同角度來觀看360°視頻，“其實(shí)就是一個(gè)光場(chǎng)了。” OTOY創(chuàng)始人Jules Urbach說到。

根據(jù)Facebook，x24相機(jī)能夠捕捉每個(gè)像素的完全RGB和深度信息。每個(gè)信息點(diǎn)會(huì)被采樣4倍，同時(shí)利用深度信息測(cè)算算法來捕捉高清影像和深度信息。小一些的x6能夠采樣3倍信息。x24能夠捕捉含有深度信息的1.2億像素點(diǎn)云，拍攝8K清晰度，每秒60幀的視頻。

即使能測(cè)算出深度信息，依然會(huì)有深度信息缺失的部分，例如HypeVR使用的激光雷達(dá)+光學(xué)攝像的方式，雖然能制作出類似于光場(chǎng)的效果的效果，但是被遮擋物體后方還是會(huì)形成一個(gè)“光場(chǎng)黑洞”，對(duì)此，合作伙伴OTOY的詳細(xì)解決方案是：

相機(jī)的攝像頭分布能夠創(chuàng)造出精準(zhǔn)的重疊部分，而這些重疊視角（x24相機(jī)有8個(gè)重疊視角）能夠補(bǔ)充任何深度信息缺失的部分和陰影；對(duì)于遠(yuǎn)景的深度信息缺失部分，我們使用啟發(fā)測(cè)算來填補(bǔ)這些缺失信息。

在F8大會(huì)上會(huì)討論一個(gè)簡(jiǎn)單的工作流程，就是在拍攝動(dòng)態(tài)元素之前，先拍攝一個(gè)背景環(huán)境底版。利用OTOY軟件能夠非常輕松的將這些底版加到影像中，最后，OTOY正在研發(fā)一個(gè)模板，能夠讓x24相機(jī)進(jìn)行4-6秒的直線或者環(huán)形運(yùn)動(dòng)，實(shí)現(xiàn)光場(chǎng)捕捉。

一般360°視頻相機(jī)都有安全距離，即物體如果距離相機(jī)太近，就會(huì)出現(xiàn)圖像縫合問題，變得支離破碎。根據(jù)Jules Urbach的說法，x24和x6的安全距離都在1米左右。

真人視頻游戲化時(shí)代到來

如果只是在360°圖像添加深度信息，那Facebook和OTOY此次的聯(lián)手意義也不算深遠(yuǎn)，更重要的是兩家正在和Adobe、Foundry、Mettle等后期軟件公司合作研發(fā)工具和流程，讓6自由度的360°視頻能融入傳統(tǒng)影視后期制作。

Jules Urbach描述的具體流程是：

1. 使用Facebook相機(jī)拍攝的信息上傳到Octane渲染云端被處理成點(diǎn)云信息，然后輸出成一個(gè)ORBX（帶有深度信息的Octane文件）的Scene File。

2. ORBX Scene File可以輸入到AE、Nuke或者Unity和Unreal等制作軟件和引擎進(jìn)行編輯。

3. 經(jīng)過一系列后期軟件出來后，能夠生成一個(gè)ORBX Media File，這個(gè)文件通過Otoy的合作伙伴就可以在Web、PC和移動(dòng)端VR頭顯上進(jìn)行觀看了。

Jules的視頻中，最令人感興趣的是目前VR開發(fā)者最喜歡使用的兩個(gè)游戲引擎Unity和Unreal都已經(jīng)支持Otoy的技術(shù)，而開發(fā)者可以使用游戲引擎來隨意改變ORBX Scene File中的360°視頻，例如改變光照和顏色等等，甚至加入帶有互動(dòng)的元素和物體，創(chuàng)造出類似于游戲一般的實(shí)時(shí)互動(dòng)效果。

從這個(gè)角度來說，F(xiàn)acebook和Otoy在軟件和硬件端的聯(lián)手，提出了一個(gè)徹底改變VR視頻制作和消費(fèi)的可能方向。

開源還是不開，這是個(gè)問題

和去年曝光的360相機(jī)不同，今年Facebook的這兩款相機(jī)x24和x6并沒有透露是否會(huì)開源。單純從制作角度來說，新款相機(jī)的制造難度就不是一般公司能夠制作的，這也是為什么臉書會(huì)和指定的合作伙伴來生產(chǎn)相機(jī)，而不是像去年一樣告訴大家用什么配件來組裝——今年Facebook即使告訴大家怎么做，能沒什么人能造出來。

正如Jaunt VR和諾基亞的OZO，兩個(gè)告訴360視頻拍攝器材更多是選擇合作伙伴來使用，或者專業(yè)機(jī)構(gòu)來租賃，而非售賣，F(xiàn)acebook的這兩款相機(jī)估計(jì)也會(huì)采用合作的形式，給想要嘗試的機(jī)構(gòu)和創(chuàng)作者來使用，而制作出來的作品，不出意外的話也會(huì)成為Oculus和Facebook平臺(tái)的獨(dú)家內(nèi)容。

Facebook今天的雞血打的很好，只是不知道大家什么時(shí)候能用上x24和x6這兩臺(tái)機(jī)器，正在F8大會(huì)前線的Zcam負(fù)責(zé)人Jason透露，相機(jī)拍出的Demo依然有瑕疵，且真正能用到兩款設(shè)備還需要比較長的時(shí)間。

后記

從6頭Gopro到Jaunt One再到諾基亞OZO，到Lytro、HypeVR和今天的Facebook x24和x6，拍攝硬件的演化證明了要想成為真正的VR內(nèi)容，帶有深度信息的可互動(dòng)的360°視頻才是前進(jìn)的方向，雖然要達(dá)成這個(gè)目標(biāo)，尚需一段時(shí)日。在那之前，我們可能還是要在3DOF的全景視頻中搖頭晃腦一陣。

【編者按】：本文轉(zhuǎn)載自IN2

最后，記得關(guān)注微信公眾號(hào)：鎂客網(wǎng)（im2maker），更多干貨在等你！