要點:

• 騰訊推出的技術(shù) Paint3D 能夠根據(jù)文本或圖像輸入，在不具有內(nèi)嵌光照信息的3D模型上生成高分辨率、無光照的多樣化紋理貼圖。

• Paint3D 利用兩階段紋理生成框架，首先通過預(yù)訓(xùn)練2D圖像生成模型獲取輸入的引導(dǎo)信息，然后在UV紋理空間上訓(xùn)練無光照擴散模型，生成無光照紋理，提升3D模型紋理生成效果。

• 通過實驗，Paint3D 在生成多樣化紋理貼圖方面表現(xiàn)顯著，幾乎在所有樣本上達到更好的效果，成為唯一一個能生成無內(nèi)嵌光照紋理的算法。

站長之家（ChinaZ.com）1月2日 消息:近日，騰訊宣布推出一項名為 Paint3D 的技術(shù)，該技術(shù)在解決了生成沒有內(nèi)嵌光照信息的高質(zhì)量紋理的挑戰(zhàn)后，成為自動化紋理貼圖生成領(lǐng)域的重大進展。

Paint3D 能夠根據(jù)文本或圖像輸入，在無紋理的3D模型上生成高分辨率、無光照的多樣化紋理貼圖。這項技術(shù)的主要目標(biāo)是使生成的紋理能夠被重新照明或重新編輯，并直接應(yīng)用于現(xiàn)有的渲染管線。

項目地址:https://top.aibase.com/tool/paint3d

Paint3D 的技術(shù)實現(xiàn)主要分為兩個階段:粗糙紋理生成和紋理細化。在粗糙階段，通過預(yù)訓(xùn)練的2D圖像生成模型獲取輸入的引導(dǎo)信息，然后將這些信息反投影到3D模型的表面上，生成初始紋理貼圖。

在細化階段，通過在UV空間中訓(xùn)練無光照擴散模型，解決粗糙紋理的光照陰影和紋理空洞問題，提升紋理貼圖的視覺美感。這一框架的引入使得Paint3D在紋理生成方面表現(xiàn)出色，被評價為最好的紋理生成方法之一。

在實驗中，Paint3D通過一系列的量化和定性實驗證明了其在生成多樣化紋理貼圖方面的顯著能力。通過評估FID得分和用戶調(diào)研，實驗結(jié)果顯示Paint3D在紋理生成質(zhì)量和符合輸入條件方面都優(yōu)于當(dāng)前最佳的紋理生成算法。不僅如此，Paint3D還展示了多種輸入條件引導(dǎo)的紋理貼圖生成，包括文字描述和示例圖像引導(dǎo)下的紋理生成。

Paint3D 的出現(xiàn)標(biāo)志著自動化紋理貼圖生成領(lǐng)域的重大進展。通過精確控制紋理貼圖中的內(nèi)容和風(fēng)格，Paint3D 可以生成高質(zhì)量、多樣化的紋理貼圖，從而顯著推進3D對象紋理化的最先進技術(shù)。更為重要的是，Paint3D 生成的紋理貼圖是沒有內(nèi)嵌光照陰影效果的，使得生成的紋理能夠被重新照明或重新編輯，直接應(yīng)用于現(xiàn)有的渲染管線，在藝術(shù)創(chuàng)作、數(shù)字媒體制作和游戲內(nèi)容創(chuàng)作等領(lǐng)域發(fā)揮重要作用。

（舉報）