劃重點:
?? ToonCrafter 通過生成性插值方法生成卡通中間幀，利用預訓練的圖像到視頻擴散先驗。
?? 能夠適應不同的動畫風格，比如簡單的線條動畫和復雜的卡通場景都可以
?? ToonCrafter 目前支持生成高達16幀、分辨率為512x320的視頻。
站長之家（ChinaZ.com）5月31日 消息:近日，一項名為 ToonCrafter 的研究項目備受關注，該項目通過生成性插值方法，在卡通動畫幀之間生成自然、連貫的中間幀，并利用預訓練的圖像到視頻擴散先驗。
簡單的說，通過 ToonCrafter，用戶可以插值兩個卡通圖像，生成連續(xù)的視頻。項目展示中呈現了多個示例，包括輸入起始幀、輸入結束幀和生成的視頻，展示了生成視頻的過程和效果。
除了基本的中間插幀功能外，ToonCrafter 還支持稀疏草圖引導和參考草圖著色，拓展了其在卡通圖像處理領域的應用場景。也就是提供一張或參考圖像，系統(tǒng)將根據參考圖像的顏色和風格，對輸入的草圖進行上色處理。
在模型方面，ToonCrafter 目前可以支持生成高達16幀、分辨率為512x320的視頻，同時推理時間可以通過減少 DDIM 步驟來縮短。此外，項目還提供了安裝環(huán)境、推理方法等方面的指引，為用戶提供了使用 ToonCrafter 的指南和支持。
（舉報）