Hololens加入動(dòng)作捕捉技術(shù)

有位開(kāi)發(fā)者將Hololens加入了動(dòng)作捕捉技術(shù)，這個(gè)或成為未來(lái)VR設(shè)備的一個(gè)新的潮流。

動(dòng)作捕捉技術(shù)在視覺(jué)特效行業(yè)內(nèi)運(yùn)用普遍，但是動(dòng)作捕捉專家、開(kāi)發(fā)者Jasper Brekelmans的新項(xiàng)目旨在為動(dòng)作捕獲帶來(lái)現(xiàn)場(chǎng)的AR視頻，使即時(shí)觀看疊加于現(xiàn)實(shí)場(chǎng)景中的舞蹈表演成為可能。

電影和電視中的視覺(jué)特效目前使用動(dòng)作捕捉技術(shù)，這是一個(gè)數(shù)字化記錄演員動(dòng)作的過(guò)程，在整個(gè)行業(yè)內(nèi)廣泛使用。

但是Jasper Brekelmans正在用微軟的增強(qiáng)現(xiàn)實(shí)頭盔HoloLen做實(shí)驗(yàn)，使導(dǎo)演和演員能觀看實(shí)時(shí)疊加在現(xiàn)實(shí)場(chǎng)景上的數(shù)字化表演。

Brekelmans曾經(jīng)利用HoloLens以及Autodesk熱門(mén)的MotionBuilder動(dòng)畫(huà)軟件來(lái)建立AR整合。

而如今他正在與一個(gè)叫The WholoDance project的團(tuán)隊(duì)合作，后者致力于數(shù)字化地去捕捉舞蹈藝術(shù)動(dòng)作，這既是為了文化也是出于研究目的。

Brekelmans 還與Motek Entertainment進(jìn)行合作，其中Motek Entertainment提供動(dòng)作捕捉技術(shù)和設(shè)備。

Brekelmans則嘗試能夠建立一種無(wú)線傳輸動(dòng)作捕捉數(shù)據(jù)的方式，使數(shù)據(jù)在產(chǎn)生后能被無(wú)線傳輸至HoloLens上。

然后HoloLens將產(chǎn)生一位AR的虛擬人物來(lái)模擬舞者的動(dòng)作，使之疊放于現(xiàn)實(shí)場(chǎng)景上。

對(duì)Brekelmans來(lái)說(shuō)，這是對(duì)他之前研究的一次進(jìn)步。

他曾運(yùn)用這項(xiàng)技術(shù)將臺(tái)式電腦上Autodesk的MotionBuilder中的數(shù)據(jù)傳輸至HoloLens。

HoloLens在動(dòng)作捕捉階段就能將真人大小的3D形象進(jìn)行即時(shí)可視化。

Brekelmans 說(shuō)，“當(dāng)我們給舞者展示HoloLens時(shí)，他們立馬被吸引住了。之后他們馬上開(kāi)始分析自己的表演，就像專業(yè)運(yùn)動(dòng)員運(yùn)用類似分析設(shè)備一樣。與利用2D屏幕展示相比，當(dāng)利用真人大小的3D人物展示時(shí)，平衡過(guò)程中的臀部運(yùn)動(dòng)或者是舞蹈步法之類的細(xì)節(jié)就會(huì)變得非常顯著和清晰。”

用戶可以利用Xbox控制器實(shí)現(xiàn)各類控制功能，如在物理空間內(nèi)讓3D人物發(fā)生位移，或是切換不同的視覺(jué)效果以及調(diào)整視覺(jué)參數(shù)。

根據(jù)必要的控制功能數(shù)量，該團(tuán)隊(duì)選擇了一個(gè)“已知設(shè)備”，而不是依靠HoloLens上普遍使用的注視、手勢(shì)和聲控功能。

Brekelmans說(shuō)，“盡管HoloLens是為放映全息圖像專門(mén)設(shè)計(jì)的，但我們和穿戴該設(shè)備的表演者一起做了實(shí)驗(yàn)。

這個(gè)設(shè)備能讓他們看到有圖像疊加在他們手上和腳上。這種展示技術(shù)目前對(duì)這個(gè)用途還不理想，但它為我們提供了可實(shí)驗(yàn)的東西，使我們對(duì)未來(lái)產(chǎn)生了新的想法。”

那么這項(xiàng)試驗(yàn)性技術(shù)將如何在未來(lái)引領(lǐng)風(fēng)潮呢?

“我們很希望能在其他設(shè)備上使用，包括那種連接臺(tái)式機(jī)、利用到高端GPU性能的設(shè)備。

同時(shí)還希望在視覺(jué)特效場(chǎng)景下使用這項(xiàng)技術(shù)，在演播室內(nèi)甚至是在外景區(qū)將3D人物和擴(kuò)展部分等可視化。”