2月12日,字節跳動發布最新視頻生成模型Seedance2.0,旗下AI產品豆包和即夢宣布接入。目前用戶可以在豆包APP、電腦端、網頁版以及即夢APP、即夢網頁版等產品中體驗該模型。
其中,豆包APP、即夢APP支持真人出鏡,用戶需要先通過錄音錄像完成真人校驗,才能生成本人形象的數字人分身,使用該分身生成AI視頻。而在豆包電腦端、網頁版以及即夢網頁版等場景中,平臺均明確提示暫不支持上傳真人人臉素材。
Seedance 2.0 能夠支持圖像、視頻、音頻、文本四種模態輸入,表達方式更豐富,生成也更可控。用戶可以用一張圖來說明自己想要的畫面風格,用一個視頻指定角色的動作和鏡頭的變化,用一段音頻表達預期的節奏和氛圍,“提示詞”開始不再局限于文字,創作過程變得更自然、更高效,也更像真正的“導演”。
此前,Seedance 2.0已經在小范圍進行內測,憑借多模態參考、精準可控性等亮點,在全球范圍內引發關注。一名海外創作者使用Seedance 2.0制作短片,與數月前海外模型的呈現效果做對比,明顯更真實、豐富的畫面讓埃隆·馬斯克也不由感慨:“這發生的也太快了。”海外社交平臺上,不少國外用戶為了用上Seedance 2.0,開始研究如何申請中國手機號。
![]()
馬斯克點評Seedance2.0在視頻效果上的進步
游戲科學CEO、《黑神話:悟空》制作人馮驥試用后評價說,Seedance 2.0是“當前地表最強的視頻生成模型”,其在多模態信息理解與整合能力上實現了飛躍。
官方技術報告顯示,Seedance 2.0 采用極致的稀疏架構來提升訓練和推理效率,基于統一的多模態視頻生成架構,模型涌現出了強大的泛化能力 ,不僅能生成音畫同步的高質量音視頻,還可支持組合的多模態參考、視頻編輯、視頻延長等復雜功能。
在基于多模態參考生成、復雜音視頻指令遵循、復雜運動穩定性、專業鏡頭語言、音視頻表現力及視聽一體化協同等多維度的測評中,Seedance 2.0 的表現均處于業內領先水平。其在運動穩定性、指令遵循及畫面美感維度均有顯著提升,生成的復雜動作流暢細膩,并支持專業級組合運鏡與敘事節奏控制。
![]()
Seedance 2.0 文字生成視頻能力評測
![]()
Seedance 2.0 圖片生成視頻能力評測
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.