站長之家（ChinaZ.com）1月17日 消息:PALP是一種用于文本到圖像生成的個性化方法。該方法通過使用得分采樣來保持模型與目標(biāo)提示的對齊，從而提高文本對齊度，并能夠生成復(fù)雜和精細(xì)的圖像。與傳統(tǒng)的文本到圖像模型相比，PALP 能夠?qū)崿F(xiàn)更高程度的個性化，同時保持與提示的對齊度。這一方法的關(guān)鍵在于利用得分采樣將模型的預(yù)測結(jié)果轉(zhuǎn)向目標(biāo)提示的方向，例如 "一只貓的草圖"。通過這種方式，PALP 能夠生成包含各種復(fù)雜和精細(xì)提示的圖像。
項(xiàng)目地址:https://top.aibase.com/tool/palp
PALP 方法通過對預(yù)訓(xùn)練模型進(jìn)行簡單的重構(gòu)損失微調(diào)來實(shí)現(xiàn)個性化。目前，已經(jīng)有一些個性化方法，如 DreamBooth-LoRA 和 TextualInversion，可以用于重構(gòu)損失微調(diào)。但是，PALP 并不限制個性化方法的選擇，其他個性化方法也可以使用。通過個性化微調(diào)，PALP 能夠根據(jù)用戶的需求生成個性化的圖像。
PALP 方法在處理復(fù)雜提示時表現(xiàn)出色，這些提示包括風(fēng)格、氛圍、地點(diǎn)等多個要素。對于每個主題，我們展示了訓(xùn)練集中的一個示例、條件文本以及與 Dreambooth 和 Textual-Inversion、Custom-Diffusion、NeTI、P + 基線的比較結(jié)果。這些比較結(jié)果定量和定性地展示了 PALP 方法的優(yōu)勢。
除了個性化生成，PALP 還支持基于藝術(shù)作品的靈感生成。通過確保與目標(biāo)提示的對齊，PALP 可以生成受單幅藝術(shù)圖片啟發(fā)的場景，例如 "一幅 [玩具 / 貓] 的油畫"。通過與目標(biāo)提示的對齊，PALP 能夠生成與藝術(shù)作品相似的圖像。
此外，PALP 還能夠從單個參考圖像實(shí)現(xiàn)高保真度和與提示對齊。通過對八個隨機(jī)噪聲樣本進(jìn)行個性化生成，PALP 展示了在單個參考圖像的情況下的優(yōu)秀表現(xiàn)。
PALP 還支持多主題的個性化生成。我們展示了針對貓和玩具主題的樣本結(jié)果，并提供了生成圖像下方的條件提示。通過這種方式，PALP 可以根據(jù)不同的主題生成對應(yīng)的圖像。
（舉報(bào)）