Jump是谷歌在打造的一個VR制作平臺,而谷歌方面近日跟我們科普了這個平臺的工作原理是什么。
谷歌Jump 是由一個開放設(shè)計(jì)的相機(jī)設(shè)備、一個可以把原始畫面變成虛擬現(xiàn)實(shí)視頻的匯編程序和視頻播放平臺組成。
近期,谷歌發(fā)表了一篇題為“Jump:VR視頻”的研究論文,論文中谷歌分享了自己的學(xué)習(xí)成果。
同時我們還了解到,谷歌還將在12月份舉辦的SIGGRAPH亞洲會議上帶來該論文的主題演講。
SIGGRAPH是計(jì)算機(jī)圖形學(xué)(CG)最權(quán)威的國際性重量級盛會,也是迄今為止世界上影響最廣、規(guī)模最大,也是最權(quán)威的集科學(xué)、技術(shù)、藝術(shù)、商業(yè)與一身的CG展示和學(xué)術(shù)會議。
針對Jump,谷歌創(chuàng)建了全向立體視頻系統(tǒng)(ODS),ODS可以提供一個360度和3D立體的無縫拼接投影,允許用戶以任意方向觀看。
此外,ODS還可以采用傳統(tǒng)視頻格式進(jìn)行存儲,以便后期制作和使用普通播放器播放影片。
盡管ODS投影模型已經(jīng)存在一段時間,但是使用ODS制作VR視頻仍然面臨很多挑戰(zhàn)。
首先,ODS最初并不是針對虛擬現(xiàn)實(shí)而設(shè)計(jì)的。
而當(dāng)戴上虛擬現(xiàn)實(shí)頭顯播放視頻時會出現(xiàn)圖像失真,這會導(dǎo)致我們的大腦很難對左右眼睛看到的圖像進(jìn)行合成。
谷歌對這些失真進(jìn)行仔細(xì)分析,確定距離和視角的實(shí)際極限,以此確保為用戶帶來一個舒適的觀影體驗(yàn)。
其次,目前也沒有可用來制作ODS視頻的現(xiàn)成系統(tǒng)。
谷歌通過仔細(xì)分析所需的攝像頭數(shù)量,視場角和設(shè)備的大小等參數(shù)之后,最終確定了Jump的最終組合形態(tài)(16個攝像頭是最佳設(shè)計(jì))。
GoPro Odyssey的設(shè)計(jì)也是采用這種分析方案。當(dāng)然,該方案首先是應(yīng)用于Jump。
最后,在多攝像頭的情況下進(jìn)行無縫拼接視頻是極具挑戰(zhàn)的,為此,谷歌開發(fā)了一個算法,可以自動無縫拼接高質(zhì)量的ODS視頻。
而這個算法的核心就是Jump Assembler匯編程序,它可以進(jìn)行數(shù)百萬的幀處理。