VR頭盔遠(yuǎn)程全景直播方案課件

無(wú)線數(shù)據(jù)傳輸360度環(huán)繞立體聲效在線實(shí)時(shí)播放無(wú)線數(shù)據(jù)傳輸

整個(gè)方案分為3個(gè)部分

視屏拼接縫合全景處理后臺(tái)遠(yuǎn)程矩陣攝像頭采集2Orah4i：能進(jìn)行360度4KVR直播的神器

主要技術(shù)規(guī)格最大輸出分別率：4K@30fps輸出視頻選項(xiàng):可視頻實(shí)時(shí)直播任何CDN；

記錄源和/或輸出視頻到SD卡；輸出音頻格式：錄制高保真度立體聲響@B-Format重量：480克體積：80x70x65（毫米）機(jī)身結(jié)構(gòu)：陽(yáng)極氧化硬鋁機(jī)身電源：48VPoE供電（網(wǎng)口供電）

攝像頭技術(shù)參數(shù)視頻處理器：2個(gè)Ambarella視頻處理器圖像傳感器：4個(gè)索尼EXMOR圖像傳感器鏡頭/分辨率：4枚魚(yú)眼鏡頭/8層水晶鏡頭/2048*1536攝像頭幀率：30fps麥克風(fēng)：4個(gè)環(huán)繞麥克風(fēng)售價(jià)：3595$遠(yuǎn)程矩陣攝像頭全景采集解決方案I——VideoStitchOrah4i遠(yuǎn)程矩陣攝像頭全景采集解決方案III——ALLieALLie（念作“ALL-E”）配備了前后各800萬(wàn)像素的攝像頭，且每個(gè)鏡頭的視角都寬至188°。根據(jù)用戶放置方式的不同，你可以看到左右、上下的360°環(huán)形視角。

主要技術(shù)規(guī)格最大輸出分別率：4096*2048輸出視頻格式::H.264輸出音頻格式:16-64kbps重量：283.5克體積：3’’x3’’x3.5’’連接：WIFI+藍(lán)牙電源：9VDC/7.5Wmax

攝像頭技術(shù)參數(shù)視頻處理器：QualcommSnapdragon800視頻處理器圖像傳感器：2個(gè)OV10823,1/2.6’圖像傳感器鏡頭/分辨率：2枚魚(yú)眼鏡頭/8層水晶鏡頭/2048*2048/2448*2448攝像頭幀率：20fps麥克風(fēng)：內(nèi)置售價(jià)：599$ALLieGo運(yùn)動(dòng)相機(jī)是一款全高清的360運(yùn)動(dòng)相機(jī)，并且運(yùn)用公司的最新360x360技術(shù)實(shí)時(shí)的通過(guò)WIFI把視頻串流到VR頭盔上面.相機(jī)尺寸大約類似一個(gè)棒球大小，可以非常容易的固定在人體或者體育設(shè)備上面。相機(jī)上面配備了2個(gè)麥克風(fēng)和內(nèi)置喇叭，內(nèi)部存儲(chǔ)空間和充電電池該相機(jī)能夠錄制2048x2048@20fps的視頻，你可以選擇流傳、錄制或分享它們。該公司甚至還提供了單獨(dú)出售的虛擬現(xiàn)實(shí)頭戴式裝置，與ALLie搭配使用效果最佳遠(yuǎn)程矩陣攝像頭全景采集解決方案IV——Sphericam2Sphericam2內(nèi)置了多達(dá)6個(gè)鏡頭和圖像感光元件，可拍攝使用者周圍的一切內(nèi)容。它可將每個(gè)攝像頭所拍攝到的畫(huà)面自動(dòng)拼接在一起，供用戶使用虛擬現(xiàn)實(shí)設(shè)備或是普通的手機(jī)/平板進(jìn)行觀看作為上代機(jī)型的升級(jí)版，Sphericam2的圖像分辨率提高到了4100x2150，視頻幀率為最高60fps。制作公司還為它提供了可拆卸的支架，以防設(shè)備在墜地時(shí)產(chǎn)生損傷售價(jià)：2499$遠(yuǎn)程矩陣攝像頭全景采集解決方案VNokiaOZO無(wú)線全景相機(jī)一直有一個(gè)難題，就是拍攝內(nèi)容的容量往往相當(dāng)巨大，所以常常需要有線纜連接進(jìn)行輸出。而OZO采用了500G的SSD固態(tài)硬盤(pán)來(lái)存儲(chǔ)影像內(nèi)容，同時(shí)硬盤(pán)還與電池合體成一個(gè)部件，插在OZO攝像頭的手柄部位，這塊500G的硬盤(pán)理論上能夠紀(jì)錄45分鐘的內(nèi)容，以USB3.0的形式通過(guò)一個(gè)充電和讀取數(shù)據(jù)的一體Dock來(lái)傳輸內(nèi)容。通過(guò)802.11的Wifi，用戶可以通過(guò)電腦來(lái)控制OZO的相機(jī)，這也讓OZO能夠以無(wú)線的狀態(tài)來(lái)進(jìn)行拍攝，解放了廣大攝影師的雙手?；胤胚@大概是OZO最牛的功能里，即提供實(shí)時(shí)的360度3D視頻的全景回放。大部分全景相機(jī)要將容量巨大的影像資料導(dǎo)出到電腦或者處理器中進(jìn)行觀看和檢查，而OZO的實(shí)時(shí)回放功能，能夠讓創(chuàng)作者隨時(shí)監(jiān)控影像作品的進(jìn)展，實(shí)現(xiàn)全方位的把控。攝像師完全可以一邊戴著Oculus的頭顯一邊進(jìn)行拍攝工作，如果他們想的話。軟件除了6萬(wàn)美元的外星飛船，諾基亞當(dāng)然還提供一攬子的后期軟件。從官網(wǎng)的介紹來(lái)看，OZO的后期軟件有遠(yuǎn)程遙控（OZORemoteApplication）和創(chuàng)作程序（OZOCreatorApplication）兩個(gè)應(yīng)用，目前似乎都只支持蘋(píng)果系統(tǒng)（OSX?10.10Yosemite）。售價(jià)：60000$全景圖像拼接縫合主機(jī)處理器：IntelCPUNvidiaGeForceGPU；存儲(chǔ)：120GSSD存儲(chǔ)；接口：1個(gè)麥克風(fēng)，1個(gè)頭顯，4個(gè)USB3.0，2個(gè)USB2.0；數(shù)據(jù)交互：LAN，Wi-Fi802.11ac/b/g/n外置天線，藍(lán)牙4.0；傳輸：5-25Mbps；輸出協(xié)議：RTMP直播到服務(wù)器,HLS提供給智能手機(jī)，3D眼鏡，VR頭盔；最大輸出分辨率(pixels)：4800

x2400；直播分辨率(pixels)：4K@30fps；輸出投影：圓柱形投影；輸出視場(chǎng)：360度球面；延遲：30秒（在使用Orah4i進(jìn)行全景視頻直播時(shí)，畫(huà)面會(huì)有30秒的延遲）Orah4i和stitchingbox之間通過(guò)一根網(wǎng)線相連，出了用于實(shí)時(shí)傳輸數(shù)據(jù)，這根網(wǎng)線還用于為Orah4i供電。使用時(shí)，用戶既可以選擇把stitchingbox放到Orah4i的三腳架下面，也可以扯上一根足夠長(zhǎng)的網(wǎng)線，把stitchingbox遠(yuǎn)遠(yuǎn)地「藏」起來(lái)Orah4iLiveprocessingunitStitchingbox「用戶體驗(yàn)：我在一臺(tái)Orah4i的旁邊，使用三星的GearVR觀看了這臺(tái)Orah4i的全景視頻直播，盡管當(dāng)時(shí)Orah4i擺放的位置光線環(huán)境較差，而且我在GearVR上使用的是已經(jīng)有些年頭的GalaxyNote4，但Orah4i捕捉的全景視頻直播畫(huà)面依舊相當(dāng)出色。此外，我還使用GearVR觀看了來(lái)自VideoStitch在舊金山的辦公室的直播畫(huà)面，相比直接把Orah4i擺放在我旁邊時(shí)，畫(huà)質(zhì)有所下降，但依然比我之前嘗試過(guò)的幾乎所有全景視頻直播畫(huà)面要更加出色。在這兩次的全景視頻直播體驗(yàn)中，我都無(wú)法看到任何視頻拼接的痕跡，考慮到VideoStitch之前一直在做這方面的軟件，這一結(jié)果也沒(méi)有什么好意外的。名稱使用方式特點(diǎn)代表產(chǎn)品頭盔配合PC/游戲機(jī)/視頻處理單元速度快，適合比較復(fù)雜的使用場(chǎng)景OculusRiftSonyPSVRHTCVive眼睛插入手機(jī)使用使用場(chǎng)景靈活，受到手機(jī)性能制約，3D效果一般三星GearVR谷歌Cardboard暴風(fēng)魔鏡一體機(jī)可獨(dú)立使用使用場(chǎng)景靈活，成本較高，技術(shù)不成熟SimLens靈鏡小黑暴風(fēng)魔鏡魔王VR頭戴硬件設(shè)備三大常產(chǎn)品形態(tài)VR頭盔解決方案雙路HDMI視頻信號(hào)光傳輸框圖VR頭盔視頻系統(tǒng)框架圖14眼動(dòng)技術(shù)在VR頭盔上應(yīng)用全視場(chǎng)角追蹤在VR設(shè)備上的眼球追蹤需要追蹤的范圍非常大，幾乎達(dá)到人眼的轉(zhuǎn)動(dòng)極限：垂直30°，水平50°，完全可以覆蓋FOV大于110°的主流VR設(shè)備。按照人類眼動(dòng)的極限來(lái)設(shè)計(jì)追蹤方案，這樣追蹤范圍廣，可無(wú)死角覆蓋整個(gè)VR顯示屏幕。高精度低延遲除了追蹤范圍，另一個(gè)非常重要的元素便是追蹤精度，尤其是在試用VR進(jìn)行互動(dòng)當(dāng)中，對(duì)操作的實(shí)時(shí)性和精準(zhǔn)度要求非常高。要讓用戶感覺(jué)不到延遲的存在，需要在眼動(dòng)數(shù)據(jù)獲取速度下功夫，而眼球追蹤技術(shù)可以彌補(bǔ)這方面的缺憾。防抖追蹤算法由于VR設(shè)備的使用時(shí)需要佩戴在頭上，而且大部分VR應(yīng)用都必須頭部動(dòng)作的配合，此時(shí)頭動(dòng)過(guò)程中便會(huì)造成VR設(shè)備與頭部的位移變化，在這種運(yùn)動(dòng)狀態(tài)下獲取準(zhǔn)確的眼球數(shù)據(jù)，無(wú)疑是對(duì)硬件和算法最大的挑戰(zhàn)。所以可針對(duì)VR設(shè)備的眼控方案特別加入了防抖算法，這樣玩家在使用過(guò)程中即使頭動(dòng)也不會(huì)影響眼球追蹤的精度。眼控VR將會(huì)為VR帶來(lái)全新的體驗(yàn)，在特定需要中可以由眼睛控制光標(biāo)鎖定，當(dāng)用戶閉上一只眼時(shí)自動(dòng)調(diào)出特寫(xiě)框等，還可以根據(jù)用戶在不用的使用場(chǎng)景中注視點(diǎn)不同觸發(fā)不同的應(yīng)用，當(dāng)用戶注視路口時(shí)，會(huì)自動(dòng)出現(xiàn)地圖導(dǎo)航，當(dāng)注視畫(huà)面不同位置觸發(fā)不同的場(chǎng)景模式等。除此之外眼控的交互方式還可以應(yīng)用于菜單，不需要使用的菜單會(huì)自動(dòng)隱藏，使用時(shí)通過(guò)眼控觸發(fā)，使VR界面更加干凈。眼動(dòng)追蹤

頭部6自由度姿態(tài)估算準(zhǔn)確率

被試特征數(shù)據(jù)準(zhǔn)確率

情緒識(shí)別類型及準(zhǔn)確率平均：93.3%標(biāo)準(zhǔn)操作距離下的頭動(dòng)范圍35.0x30.0x40.0cm

俯仰角度

5.1度（±4.59度）年齡估算±7年中性

88.3%操作距離(標(biāo)準(zhǔn)操作距離)30-100cm(60cm)搖擺角度6.0度（±5.78度）性別判斷87%

愉悅

95.3%單/雙眼追蹤雙眼追蹤偏轉(zhuǎn)角度

2.9度（±2.81度）面部寬度16像素

驚奇100%眨眼追蹤