聲明:本文來自于微信公眾號數(shù)字生命卡茲克,作者:數(shù)字生命卡茲克,授權(quán)站長之家轉(zhuǎn)載發(fā)布。
早上起床,看到海螺的AI視頻,又雙叒叕加強了。
他們悄悄上了一個新功能:主體參考。
描述非常簡單:
Upload a photo, describe the scene - watch your character star in any scene。
一張照片+一段描述,讓你的角色出演任何場景。
這就是沖著“取代”演員來的。
人物參考,絕對會是AI視頻未來的標配。也是AI能進軍影視行業(yè)的必經(jīng)之路。更是解決一致性的第一步。
X上老外已經(jīng)玩瘋了。
比如這個,有老外做了一個同一張臉在不同的服裝和場景劇情的case。
非常的穩(wěn)定。
除了真人,3D角色效果也都不錯。
甚至還能做動物。
目前應該是全量了,因為我自己的小號也能用了= =
國內(nèi)版網(wǎng)址在此:https://hailuoai.com/video
海外版:https://hailuoai.video/
不過我自己一般喜歡用海外版的,原因不說了,你懂的。
登錄海螺后,進入AI視頻生成頁面。模型標簽欄里選【主體參考】,海外版的叫【Subject Reference】
上傳你的角色照片,就點擊【添加參考角色】,就會彈出角色庫。
傳圖就很簡單了,jpg、png啥的都可以,只要海螺能識別出“臉”。而且你上傳的角色都會保存在角色庫里,如果之后還要復用這張臉,直接去庫里找就行。
【添加參考角色】的下方,就是寫Prompt的位置。
這里沒啥好說的,就是強烈建議開啟海螺自帶的提示詞優(yōu)化功能,點一支筆的那個icon就行。roll出的視頻效果會好非常多,小白友好。
傳好你的角色人臉、寫好prompt,OK了。就這么簡單兩步。
直接點擊生成,坐等海螺給你跑出視頻就行。
我跑了幾個好玩的。
比如直接打開了科技圈大佬們的衣柜,讓他們來一個經(jīng)典皮膚互換。
讓庫克穿上周老板紅色polo衫。你別說,是有內(nèi)味兒了。
黃仁勛穿上黑色高領(lǐng)……好家伙,有一股子當年喬老爺子的味道了。
還有,讓奧特曼穿上皮衣來宣傳英偉達顯卡。
就,非常的歡樂。
在我跑了幾個小時以后,總結(jié)一下我自己測評的感受,大概就是:
很強的人臉穩(wěn)定性和一致性,以及無與倫比的情緒表演。
一.很強的一致性
首先最重要的,一致性。
簡單來說就是:你給誰的照片,生成的視頻里就穩(wěn)定是誰的樣子,不會突然變成隔壁老王。
玩過AI視頻的都懂,人臉不穩(wěn)定多讓人崩潰。
同一個prompt的結(jié)果,今天是馬冬梅,明天是馬東錫,后天不知道又變誰了。尤其是想拍個完整劇情的時候,前后兩個鏡頭主角的臉對不上,觀眾直接出戲。
我去年4月做過的一個的CCTV6的短片,光調(diào)整人臉一致性就折騰了三天。。。= =
現(xiàn)在,人臉一致性就非常的爽。
比如這個case,老人面部的皺紋紋路、神態(tài),細節(jié)穩(wěn)定得不行,轉(zhuǎn)個頭都不帶跑偏的。
甚至面部彩繪都能完美保持。比如這個小丑的case,雖然肢體和附近的雜耍球有一點小崩,但臉賊還原,復雜的妝面效果和面部細節(jié)幾乎沒丟。
還有一個我摸索出來的很騷的玩法。就是只要用一張照片加個prompt,就能看到演員“增重”的效果。。。
這種效果要擱傳統(tǒng)拍電影,不得上CG、特效化妝折騰半天,現(xiàn)在寫個prompt的功夫就搞定,立省百分百。
二.連續(xù)性很強
其次連續(xù)性,也就是同一個視頻里人臉得穩(wěn)定。你總不能角色轉(zhuǎn)個頭的功夫,突然變成另一個人吧。
所以我測試了一下讓角色轉(zhuǎn)頭、抬頭、低頭……連貫展示多個面部角度。你們感受下這個穩(wěn)定性。
只用一張照片就能做到這個效果,真的牛。
還有這個case。我讓角色:先戴上墨鏡,說話,然后突然摘下來。
這個銜接。。。縱享絲滑。墨鏡遮擋前后的五官細節(jié)一點沒變形。
三.表情演出穩(wěn)定發(fā)揮
還有海螺AI的看家本領(lǐng):角色表演。
海螺AI的人物表情細節(jié)和真實感,一直是我認為目前所有AI視頻模型里做得最好的。
這次的S2V模型保持了情緒表演的優(yōu)良傳統(tǒng)。雖然整體來說,我覺得有點不如海螺的T2V和I2V的演技好。但在同類的人臉參考模型里,已經(jīng)很不錯了。
比如這個女人的喜怒哀樂。
有了這個功能,以后大家拍視頻說不定真的能省下一大筆演員費。。。
用一張照片就能當演員,拍一個屬于你自己的大片,自此,真的不再是幻想。
在X上我還看到不少老萬拿自己的照片玩兒穿越,科幻片、動作片、文藝片。。。
啥風格都有,真就“重生之我是好萊塢巨星”。
我有一部很喜歡的電影《瞬息全宇宙》,里面有一段很經(jīng)典的剪輯,就是楊紫瓊在不同的平行宇宙的樣子快速切換。短短幾秒體驗了十幾種人生的感覺,很酷。
作為一個二次元加老中二病,我也想整個活,看看平行宇宙的自己是啥樣子。
于是,我拿著自己的證件照,決定整個活,開啟我自己的“多元宇宙”之旅。
在《加勒比海盜》里征服大海,在《哈利波特》懟伏地魔,在某部韓劇當霸總,在《賽博朋克2077》勇闖夜之城,在《007》搞定“Mission impossible”,在《飛馳人生》挑戰(zhàn)自我。。。甚至在《蝙蝠俠》守護哥譚市。
“地球Online2025”(錢不夠演員未定劇本暫無版),敬請期待。
數(shù)字生命卡茲克,贊28
我可太喜歡了。。。
最后來說一下缺點,海螺AI的人物參考很棒,但是也不是一點問題都沒有。
首先就是整體來說還是得抽抽卡,大概跑個三四次之后能roll出比較好的效果。
然后就是肢體方面,比較安靜的狀態(tài)和小幅度動作都挺穩(wěn)的,但是舞蹈、蹦跳之類的大幅度動作,海螺確實還有進步空間,可以再練練。
其他的就沒啥可說的,瑕不掩瑜,海螺AI在AI視頻的道路上,還是一路向前的。
從23年到現(xiàn)在,我也算是一路看著AI視頻從最初的PPT,發(fā)展到現(xiàn)在逼近真實的質(zhì)感。
一開始崩得不行的"吃面",早就克服了;情緒表演,比如海螺已經(jīng)做得很出色了;舞蹈之類的大動作,可靈1.6也把天花板打得無限高,也越來越穩(wěn)定。
再加上這次的人物參考,視頻越來越可控。
AI生成內(nèi)容的頭頂一直有三朵烏云:風格一致性、人物一致性、場景一致性,風格一致性以經(jīng)被解決的很好了,人物一致性,現(xiàn)在海螺也能非常好的解決。
AI視頻的玩法也不再只是零散片段,它可以嘗試著,去完整地拍完一個故事了。
AI電影從概念照進現(xiàn)實,似乎,只差臨門一腳了。
那個臨門一腳,就是最后的,場景一致性。
期待海螺在這塊,能繼續(xù)迭代,給出一個很好的方案。
那曾經(jīng)的幻想,我覺得都將成為可能。
我突然想起莊子在《逍遙游》里說的那只鯤鵬。
翅膀遮天蔽日,能凌空九萬里。
這一次,我們都是鯤鵬。
工具已經(jīng)擺在眼前,只待你腦海中精彩絕倫的故事。
每個人都將可以成為導演,
而AI,正在等待你的第一聲“Action”。
(舉報)