誰能想到有一天,我絲毫不費力氣,就能實現小時候夢想的所有變身。
上面這些復刻經典電影的特效,實際上每一個我只花了幾分鐘就做出來了。
而且用的是我們的老朋友的新版本,Vidu Q2 參考生 Pro 視頻模型。
這位老朋友做參考生視頻有多厲害,不用我多說了,當時它是第一個提出并做出“參考生視頻”功能的,能夠把多個元素直接生成視頻,一定程度上直接解決了AI視頻一致性的問題。
而這個新的Vidu Q2 參考生 Pro 視頻模型,我拿到內測玩了幾天之后給我的感覺是,
![]()
這是一個萬物皆可參考的視頻模型,
Vidu.cn
我可以上傳4張圖片,2個視頻,可以參考它們中的人物和場景,還可以復刻它的特效,情緒表情,材質和紋理和人物動作,還能實現增刪改減視頻中的元素,實現改變背景、替換主體、修改比例、修改風格以及美顏美發等操作。
也就是說,精準復刻和視頻編輯都被這個 Vidu 的新模型拿捏了,
哪里不會點哪里。
尤其是復刻材質這一塊,是一個非常新的體驗。
比如我把這段原視頻里的石膏雕像,分別復刻成了青花瓷、草地和毛絨材質,Vidu Q2參考生Pro都能精準地識別出圖片中的材質,并遷移到原視頻中。
將@視頻1里的雕像的材質改為@圖1的材質,其他維持原視頻模樣
在參考生視頻這塊還有一個很痛的點,之前一些視頻工具最多只能上傳一個視頻作為參考。也就是說,如果我上傳一個視頻加一張圖片,就無法控制圖片中的人物在視頻中出現時的動作和姿態的。
但是現在在Vidu Q2參考生Pro視頻功能下,我可以傳兩個5秒內的視頻,讓人物保持原視頻中的動作,并在此基礎上將兩個人物融合成一個新的視頻,也就是說,我可以既保留原視頻的動作,又能復刻另一個視頻中的特效,表情和紋理。
比如我給 Vidu 提供了一個女生在森林里跑兩步停下的動作視頻,然后又提供了一段女生由哭變笑的情緒轉變視頻,
看這個生成的效果,生成出來的新視頻,既延續了視頻一的動作和運鏡,又復刻了視頻二的情緒和表情。
或者我可以讓一張圖片中的人物同時做出視頻一的先跑后停的動作,以及視頻二的先笑后哭的表情情緒,
也就是說,在像Vidu這樣能夠支持多種素材、多個視頻參考方式的情況下,我可以組合出各種各樣的視頻復刻模式,疊加后做出更加有創意的效果。
這種可以多種素材復合遷移的方式非常適合做AI 短劇、AI漫劇這種大體量的AI視頻制作,可以把動作和表情拆開了,像拼樂高一樣自由組合出最想要的表演。
當然提到這里,我還是要再展示兩個模仿動作的效果。我是沒有想到,有一天我也可以跳上抖舞了,有點羞恥啊,實在是有點太羞恥了。。。
![]()
不過這個動作還是挺準確的,跳得有點那個味兒,就是看著我這張臉,感覺不是很得勁。當然讓二次元的人物去復刻視頻中的動作,也是完全可以的。
![]()
除了模仿人物動作和情緒之外,我這里回收一下開頭,Vidu Q2參考生Pro目前表現最好的是可以復刻各種電影的名場面特效,而且還不只是人物特效。
比如說《閃靈》馬上就要重映了,我們復刻一下這個經典鏡頭,可以讓它在一個全新的場景內直接復現這個經典的效果
說完精準復刻,我們再來說說Vidu Q2參考生Pro的視頻編輯。
基礎的增刪是完全沒有問題的,能夠精準地識別出視頻中想要修改的元素位置,生成出來的效果和原視頻融合得也非常自然。
或者像我們平時視頻編輯中比較經常會使用到的改變背景,Vidu 做出來的效果也非常不錯,能夠精準地呈現素材圖中的場景,將原視頻的人物和新背景的光影融合在一起。
既然背景可以替換的話,那畫面中的人物也是可以進行替換的,包括畫面中的任何主體元素,都可以進行隨意的更換,比如這里,我既可以把我的小貓換成小豬,也可以把我自己換成小黃人里的格魯。
比較常見的視頻風格也可以用提示語一鍵轉換,
將視頻改成日漫/皮克斯動畫/粘土風格
還有一個很有意思的玩法,就是利用這種在視頻中增加或修改元素的視頻編輯功能,給主人公修改發型、增添胡須,甚至可以給他們畫個妝。
體驗一圈下來,我最大的感受是,
對視頻的精確控制,就是所有AI視頻模型下一步。
以前,我們可能滿足于AI能為我們生成一個驚艷的鏡頭,
但隨著使用的頻率增高,我真正需要的,其實是對鏡頭的絕對控制。
Vidu Q2參考生Pro這次更新,在這條路上邁出了很踏實的一步。
AI視頻創作,可以不再是反復抽卡,
我們可以精準地復刻人物、情緒和動作,
我們可以像P圖一樣,增刪改視頻里的每一個元素,
創作的自由度不再受限,
我們能一點點把AI做的,
打磨成我們想要的。
@ 作者 / 卡爾
最后,感謝你看到這里如果喜歡這篇文章,不妨順手給我們點贊|在看|轉發|評論
如果想要第一時間收到推送,不妨給我個星標
如果你有更有趣的玩法,歡迎在評論區和我聊聊
更多的內容正在不斷填坑中……
![]()
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.