誰(shuí)能想到有一天,我絲毫不費(fèi)力氣,就能實(shí)現(xiàn)小時(shí)候夢(mèng)想的所有變身。
上面這些復(fù)刻經(jīng)典電影的特效,實(shí)際上每一個(gè)我只花了幾分鐘就做出來(lái)了。
而且用的是我們的老朋友的新版本,Vidu Q2 參考生 Pro 視頻模型。
這位老朋友做參考生視頻有多厲害,不用我多說(shuō)了,當(dāng)時(shí)它是第一個(gè)提出并做出“參考生視頻”功能的,能夠把多個(gè)元素直接生成視頻,一定程度上直接解決了AI視頻一致性的問(wèn)題。
而這個(gè)新的Vidu Q2 參考生 Pro 視頻模型,我拿到內(nèi)測(cè)玩了幾天之后給我的感覺(jué)是,
![]()
這是一個(gè)萬(wàn)物皆可參考的視頻模型,
Vidu.cn
我可以上傳4張圖片,2個(gè)視頻,可以參考它們中的人物和場(chǎng)景,還可以復(fù)刻它的特效,情緒表情,材質(zhì)和紋理和人物動(dòng)作,還能實(shí)現(xiàn)增刪改減視頻中的元素,實(shí)現(xiàn)改變背景、替換主體、修改比例、修改風(fēng)格以及美顏美發(fā)等操作。
也就是說(shuō),精準(zhǔn)復(fù)刻和視頻編輯都被這個(gè) Vidu 的新模型拿捏了,
哪里不會(huì)點(diǎn)哪里。
尤其是復(fù)刻材質(zhì)這一塊,是一個(gè)非常新的體驗(yàn)。
比如我把這段原視頻里的石膏雕像,分別復(fù)刻成了青花瓷、草地和毛絨材質(zhì),Vidu Q2參考生Pro都能精準(zhǔn)地識(shí)別出圖片中的材質(zhì),并遷移到原視頻中。
將@視頻1里的雕像的材質(zhì)改為@圖1的材質(zhì),其他維持原視頻模樣
在參考生視頻這塊還有一個(gè)很痛的點(diǎn),之前一些視頻工具最多只能上傳一個(gè)視頻作為參考。也就是說(shuō),如果我上傳一個(gè)視頻加一張圖片,就無(wú)法控制圖片中的人物在視頻中出現(xiàn)時(shí)的動(dòng)作和姿態(tài)的。
但是現(xiàn)在在Vidu Q2參考生Pro視頻功能下,我可以傳兩個(gè)5秒內(nèi)的視頻,讓人物保持原視頻中的動(dòng)作,并在此基礎(chǔ)上將兩個(gè)人物融合成一個(gè)新的視頻,也就是說(shuō),我可以既保留原視頻的動(dòng)作,又能復(fù)刻另一個(gè)視頻中的特效,表情和紋理。
比如我給 Vidu 提供了一個(gè)女生在森林里跑兩步停下的動(dòng)作視頻,然后又提供了一段女生由哭變笑的情緒轉(zhuǎn)變視頻,
看這個(gè)生成的效果,生成出來(lái)的新視頻,既延續(xù)了視頻一的動(dòng)作和運(yùn)鏡,又復(fù)刻了視頻二的情緒和表情。
或者我可以讓一張圖片中的人物同時(shí)做出視頻一的先跑后停的動(dòng)作,以及視頻二的先笑后哭的表情情緒,
也就是說(shuō),在像Vidu這樣能夠支持多種素材、多個(gè)視頻參考方式的情況下,我可以組合出各種各樣的視頻復(fù)刻模式,疊加后做出更加有創(chuàng)意的效果。
這種可以多種素材復(fù)合遷移的方式非常適合做AI 短劇、AI漫劇這種大體量的AI視頻制作,可以把動(dòng)作和表情拆開(kāi)了,像拼樂(lè)高一樣自由組合出最想要的表演。
當(dāng)然提到這里,我還是要再展示兩個(gè)模仿動(dòng)作的效果。我是沒(méi)有想到,有一天我也可以跳上抖舞了,有點(diǎn)羞恥啊,實(shí)在是有點(diǎn)太羞恥了。。。

不過(guò)這個(gè)動(dòng)作還是挺準(zhǔn)確的,跳得有點(diǎn)那個(gè)味兒,就是看著我這張臉,感覺(jué)不是很得勁。當(dāng)然讓二次元的人物去復(fù)刻視頻中的動(dòng)作,也是完全可以的。

除了模仿人物動(dòng)作和情緒之外,我這里回收一下開(kāi)頭,Vidu Q2參考生Pro目前表現(xiàn)最好的是可以復(fù)刻各種電影的名場(chǎng)面特效,而且還不只是人物特效。
比如說(shuō)《閃靈》馬上就要重映了,我們復(fù)刻一下這個(gè)經(jīng)典鏡頭,可以讓它在一個(gè)全新的場(chǎng)景內(nèi)直接復(fù)現(xiàn)這個(gè)經(jīng)典的效果
說(shuō)完精準(zhǔn)復(fù)刻,我們?cè)賮?lái)說(shuō)說(shuō)Vidu Q2參考生Pro的視頻編輯。
基礎(chǔ)的增刪是完全沒(méi)有問(wèn)題的,能夠精準(zhǔn)地識(shí)別出視頻中想要修改的元素位置,生成出來(lái)的效果和原視頻融合得也非常自然。
或者像我們平時(shí)視頻編輯中比較經(jīng)常會(huì)使用到的改變背景,Vidu 做出來(lái)的效果也非常不錯(cuò),能夠精準(zhǔn)地呈現(xiàn)素材圖中的場(chǎng)景,將原視頻的人物和新背景的光影融合在一起。
既然背景可以替換的話,那畫(huà)面中的人物也是可以進(jìn)行替換的,包括畫(huà)面中的任何主體元素,都可以進(jìn)行隨意的更換,比如這里,我既可以把我的小貓換成小豬,也可以把我自己換成小黃人里的格魯。
比較常見(jiàn)的視頻風(fēng)格也可以用提示語(yǔ)一鍵轉(zhuǎn)換,
將視頻改成日漫/皮克斯動(dòng)畫(huà)/粘土風(fēng)格
還有一個(gè)很有意思的玩法,就是利用這種在視頻中增加或修改元素的視頻編輯功能,給主人公修改發(fā)型、增添胡須,甚至可以給他們畫(huà)個(gè)妝。
體驗(yàn)一圈下來(lái),我最大的感受是,
對(duì)視頻的精確控制,就是所有AI視頻模型下一步。
以前,我們可能滿足于AI能為我們生成一個(gè)驚艷的鏡頭,
但隨著使用的頻率增高,我真正需要的,其實(shí)是對(duì)鏡頭的絕對(duì)控制。
Vidu Q2參考生Pro這次更新,在這條路上邁出了很踏實(shí)的一步。
AI視頻創(chuàng)作,可以不再是反復(fù)抽卡,
我們可以精準(zhǔn)地復(fù)刻人物、情緒和動(dòng)作,
我們可以像P圖一樣,增刪改視頻里的每一個(gè)元素,
創(chuàng)作的自由度不再受限,
我們能一點(diǎn)點(diǎn)把AI做的,
打磨成我們想要的。
@ 作者 / 卡爾
最后,感謝你看到這里如果喜歡這篇文章,不妨順手給我們點(diǎn)贊|在看|轉(zhuǎn)發(fā)|評(píng)論
如果想要第一時(shí)間收到推送,不妨給我個(gè)星標(biāo)
如果你有更有趣的玩法,歡迎在評(píng)論區(qū)和我聊聊
更多的內(nèi)容正在不斷填坑中……
![]()
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.