站長之家（ChinaZ.com）5月8日 消息:馬克斯·普朗克信息學(xué)研究所、薩爾大學(xué)和薩爾布呂肯視覺計(jì)算、交互與人工智能研究中心的合作團(tuán)隊(duì)提出了一種創(chuàng)新的實(shí)時(shí)渲染方法，該方法只需要4個(gè)攝像頭視角和3D骨骼姿勢(shì)，就能夠捕捉并呈現(xiàn)人類運(yùn)動(dòng)的高度逼真細(xì)節(jié)，包括衣服的褶皺、面部表情和手勢(shì)。這一技術(shù)能夠?qū)崟r(shí)以4K分辨率生成角色的自由視角視頻，為動(dòng)畫制作、影視特效以及游戲開發(fā)帶來了革命性的變革。
項(xiàng)目地址：https://vcai.mpi-inf.mpg.de/projects/holochar/
主要功能亮點(diǎn)
實(shí)時(shí)自由視角呈現(xiàn):通過4個(gè)稀疏攝像頭視角和3D骨骼姿勢(shì)數(shù)據(jù)，實(shí)現(xiàn)在4K分辨率下實(shí)時(shí)生成角色視頻。
高精度動(dòng)態(tài)建模:采用骨骼驅(qū)動(dòng)的神經(jīng)網(wǎng)絡(luò)，精確捕捉人體的動(dòng)態(tài)幾何形狀，細(xì)致呈現(xiàn)衣物、面部及手勢(shì)等細(xì)節(jié)。
依視角變化的紋理映射:從四個(gè)攝像頭視角創(chuàng)建變化的紋理，準(zhǔn)確重現(xiàn)角色動(dòng)態(tài)中的紋理細(xì)節(jié)。
圖像優(yōu)化與4K渲染:使用圖像優(yōu)化網(wǎng)絡(luò)生成高分辨率視頻畫面，確保最終視頻的逼真度和細(xì)膩度。
廣泛適用的角色表現(xiàn):適應(yīng)不同類型演員的服裝，無論是緊身或?qū)捤?，都能捕捉并呈現(xiàn)豐富的動(dòng)態(tài)細(xì)節(jié)。
技術(shù)方法
骨骼模型驅(qū)動(dòng):利用人的骨骼姿勢(shì)數(shù)據(jù)創(chuàng)建虛擬模型，跟蹤人體運(yùn)動(dòng)。
多角度紋理映射:將不同角度攝像頭捕捉的圖像映射到虛擬模型上，生成逼真的外觀。
紋理增強(qiáng):通過神經(jīng)網(wǎng)絡(luò)結(jié)合多角度圖像數(shù)據(jù)，增強(qiáng)衣物褶皺和面部表情等細(xì)節(jié)。
圖像優(yōu)化:最終渲染成4K超高分辨率畫面，確保角色細(xì)節(jié)在各種動(dòng)作和服裝下的真實(shí)呈現(xiàn)。
這項(xiàng)技術(shù)的應(yīng)用前景廣闊，不僅能夠提升影視和游戲內(nèi)容的制作質(zhì)量，還能夠?yàn)樘摂M現(xiàn)實(shí)（VR）和增強(qiáng)現(xiàn)實(shí)(AR)體驗(yàn)提供更加逼真的視覺效果。
（舉報(bào)）
