有位開發(fā)者將Hololens加入了動作捕捉技術(shù),這個或成為未來VR設(shè)備的一個新的潮流。
動作捕捉技術(shù)在視覺特效行業(yè)內(nèi)運用普遍,但是動作捕捉專家、開發(fā)者Jasper Brekelmans的新項目旨在為動作捕獲帶來現(xiàn)場的AR視頻,使即時觀看疊加于現(xiàn)實場景中的舞蹈表演成為可能。
電影和電視中的視覺特效目前使用動作捕捉技術(shù),這是一個數(shù)字化記錄演員動作的過程,在整個行業(yè)內(nèi)廣泛使用。
但是Jasper Brekelmans正在用微軟的增強現(xiàn)實頭盔HoloLen做實驗,使導(dǎo)演和演員能觀看實時疊加在現(xiàn)實場景上的數(shù)字化表演。
Brekelmans曾經(jīng)利用HoloLens以及Autodesk熱門的MotionBuilder動畫軟件來建立AR整合。
而如今他正在與一個叫The WholoDance project的團隊合作,后者致力于數(shù)字化地去捕捉舞蹈藝術(shù)動作,這既是為了文化也是出于研究目的。
Brekelmans 還與Motek Entertainment進行合作,其中Motek Entertainment提供動作捕捉技術(shù)和設(shè)備。
Brekelmans則嘗試能夠建立一種無線傳輸動作捕捉數(shù)據(jù)的方式,使數(shù)據(jù)在產(chǎn)生后能被無線傳輸至HoloLens上。
然后HoloLens將產(chǎn)生一位AR的虛擬人物來模擬舞者的動作,使之疊放于現(xiàn)實場景上。
對Brekelmans來說,這是對他之前研究的一次進步。
他曾運用這項技術(shù)將臺式電腦上Autodesk的MotionBuilder中的數(shù)據(jù)傳輸至HoloLens。
HoloLens在動作捕捉階段就能將真人大小的3D形象進行即時可視化。
Brekelmans 說,“當(dāng)我們給舞者展示HoloLens時,他們立馬被吸引住了。之后他們馬上開始分析自己的表演,就像專業(yè)運動員運用類似分析設(shè)備一樣。與利用2D屏幕展示相比,當(dāng)利用真人大小的3D人物展示時,平衡過程中的臀部運動或者是舞蹈步法之類的細節(jié)就會變得非常顯著和清晰!
用戶可以利用Xbox控制器實現(xiàn)各類控制功能,如在物理空間內(nèi)讓3D人物發(fā)生位移,或是切換不同的視覺效果以及調(diào)整視覺參數(shù)。
根據(jù)必要的控制功能數(shù)量,該團隊選擇了一個“已知設(shè)備”,而不是依靠HoloLens上普遍使用的注視、手勢和聲控功能。
Brekelmans說,“盡管HoloLens是為放映全息圖像專門設(shè)計的,但我們和穿戴該設(shè)備的表演者一起做了實驗。
這個設(shè)備能讓他們看到有圖像疊加在他們手上和腳上。這種展示技術(shù)目前對這個用途還不理想,但它為我們提供了可實驗的東西,使我們對未來產(chǎn)生了新的想法。”
那么這項試驗性技術(shù)將如何在未來引領(lǐng)風(fēng)潮呢?
“我們很希望能在其他設(shè)備上使用,包括那種連接臺式機、利用到高端GPU性能的設(shè)備。
同時還希望在視覺特效場景下使用這項技術(shù),在演播室內(nèi)甚至是在外景區(qū)將3D人物和擴展部分等可視化!