劃重點(diǎn):

?? 通過視頻生成模型學(xué)習(xí)的物體動態(tài)先驗(yàn)知識，實(shí)現(xiàn)靜態(tài)3D 物體對新型交互的真實(shí)響應(yīng)。

?? PhysDreamer 利用物理學(xué)方法賦予靜態(tài)3D 物體交互式動態(tài)，提升虛擬體驗(yàn)的真實(shí)感和吸引力。

?? 通過用戶研究驗(yàn)證合成交互的真實(shí)性，PhysDreamer 為靜態(tài)3D 物體動態(tài)響應(yīng)提供了一種物理合理的方式。

站長之家（ChinaZ.com）4月28日 消息:在創(chuàng)建沉浸式虛擬體驗(yàn)時，實(shí)現(xiàn)真實(shí)物體交互至關(guān)重要。然而，針對新型交互合成真實(shí)的3D 物體動態(tài)仍然是一項(xiàng)重大挑戰(zhàn)。

與無條件或文本條件的動態(tài)生成不同，動作條件的動態(tài)需要感知物體的物理材料特性，并基于這些特性（如物體剛度）來進(jìn)行3D 運(yùn)動預(yù)測。然而，由于缺乏物質(zhì)真實(shí)數(shù)據(jù)，估計(jì)物理材料特性是一個尚未解決的問題，因?yàn)闉檎鎸?shí)物體測量這些特性非常困難。

研究提出了 PhysDreamer，這是一種利用視頻生成模型學(xué)習(xí)的物體動態(tài)先驗(yàn)知識的物理學(xué)方法。通過提煉這些先驗(yàn)知識，PhysDreamer 可以合成對新型交互（如外部力或代理操作）的真實(shí)物體響應(yīng)。

簡單的說，PhysDreamer通過視頻生成模型學(xué)習(xí)不同物體的動力學(xué)規(guī)律，然后以符合物理規(guī)律的方式給3D物體添加運(yùn)動效果。 如示例，戳一朵花，PhysDreamer可以接近真實(shí)的還原花會運(yùn)動的方向過程。

研究人員在各種彈性物體示例上展示了PhysDreamer，并通過用戶研究評估了合成交互的真實(shí)性。PhysDreamer 通過使靜態(tài)3D 物體能夠以物理合理的方式動態(tài)響應(yīng)互動刺激，邁出了向更具吸引力和真實(shí)感的虛擬體驗(yàn)的一步。

產(chǎn)品入口：https://top.aibase.com/tool/physdreamer

（舉報(bào)）