一個(gè)由研究院、大學(xué)以及科技公司組成的團(tuán)隊(duì)日前在SIGGRAPH2017（世界上影響最廣、規(guī)模最大，同時(shí)也是最權(quán)威的一個(gè)集科學(xué)、藝術(shù)、商業(yè)于一身的計(jì)算機(jī)圖形技術(shù)硬軟件展示、學(xué)術(shù)研討會(huì)）上展示了全新的VR實(shí)時(shí)數(shù)字人物沉浸技術(shù)。大會(huì)上先進(jìn)的圖像捕捉、編輯、沉浸技術(shù)將計(jì)算機(jī)實(shí)時(shí)數(shù)字人物沉浸技術(shù)的水平又推向了新的水準(zhǔn)。
MEETMIKE，是此次大會(huì)上新展出的一種VR沉浸技術(shù)。該項(xiàng)技術(shù)能夠?qū)崿F(xiàn)人物現(xiàn)實(shí)的動(dòng)作的實(shí)時(shí)數(shù)字影像沉浸。其中一位記者體驗(yàn)了該項(xiàng)技術(shù)。記者在VR中扮演主持人的角色，對(duì)VR行業(yè)資深人士以及研究員進(jìn)行采訪。其他一些佩戴VR頭盔的參與者可以在虛擬攝影棚里觀看采訪過(guò)程。
記者的VR體驗(yàn)結(jié)果相當(dāng)令人驚訝。采用Epic的Unreal引擎以及90FPS的VR沉浸，記者的電子影像表現(xiàn)出令人難以置信的清晰度，記者面部的眉毛、眼瞼、以及皮膚紋理毛孔都能清晰可見(jiàn)。
在體驗(yàn)之前，記者首先要戴上一套Technoprops立體照相機(jī)裝置，以用于觀察記者的面部運(yùn)動(dòng)。面部圖像通過(guò)CubicMotion（著名人物面部動(dòng)畫(huà)公司）的技術(shù)進(jìn)行追蹤和控制，通過(guò)記者在Wikihuman項(xiàng)目（一個(gè)電子人像交流項(xiàng)目）的掃描，再轉(zhuǎn)到3Lateral（人物面部綁定技術(shù)公司）的面部處理裝置。
關(guān)于MEETMIKE：
----MEETMIKE有440,000個(gè)三角形正在進(jìn)行實(shí)時(shí)沉浸，這意味著VR立體沉浸的速度在9毫秒，而75%的用于頭發(fā)的沉浸。
----MEETMIKE面部裝置有大概80個(gè)連接結(jié)構(gòu)，大部分用于頭發(fā)以及面部汗毛的運(yùn)動(dòng)。
----面部的動(dòng)作，只需要10個(gè)連接結(jié)構(gòu)，用于下巴、眼睛以及舌頭的動(dòng)作。
----在最終的頭部動(dòng)作配套版本中，結(jié)合了750個(gè)混合變形。
----系統(tǒng)采用了傳統(tǒng)軟件設(shè)計(jì)的復(fù)雜機(jī)制以及三種AI深度學(xué)習(xí)工程。
整個(gè)項(xiàng)目雖然存在一些不是很清晰的地方，但是聽(tīng)起來(lái)該記者的數(shù)字沉浸是在一臺(tái)GTX1080TiGPU、32GBRAM的PC上完成的。更多電腦配置數(shù)據(jù)暫時(shí)沒(méi)有公布。
更多資訊請(qǐng)關(guān)注機(jī)器視覺(jué)頻道
網(wǎng)站客服
粵公網(wǎng)安備 44030402000946號(hào)