2月18日,昆侖萬維開源中國首個面向AI短劇創(chuàng)作的視頻生成模型SkyReels-V1、中國首個SOTA級別基于視頻基座模型的表情動作可控算法SkyReels-A1。
據(jù)了解,SkyReels-V1可實現(xiàn)影視級人物微表情表演生成,支持33種細(xì)膩人物表情與400+種自然動作組合,高度還原真人情感表達(dá)。正如以下視頻所示,SkyReels-V1支持生成大笑、怒吼、驚訝、哭泣等微表情,展現(xiàn)出人物情感豐沛的表演細(xì)節(jié)。即使有大幅度肢體動作,SkyReels-V1生成的微表情也完美貼合人物肢體表演。
同時,SkyReels-V1為AI視頻生成帶來了電影級光影美學(xué),基于好萊塢級的高質(zhì)量影視數(shù)據(jù)訓(xùn)練,當(dāng)前SkyReels生成的每一幀畫面,在構(gòu)圖、演員站位、相機角度等方面都具備電影級的質(zhì)感。無論是單人鏡頭表演細(xì)節(jié),還是多人構(gòu)圖,當(dāng)前已具備精準(zhǔn)的表情控制和高質(zhì)感畫面。
更重要的是,SkyReels-V1不僅支持文生視頻、還能支持圖生視頻,是開源視頻生成模型中參數(shù)最大的支持圖生視頻的模型,在同等分辨率下各項指標(biāo)實現(xiàn)開源SOTA。
為了實現(xiàn)更加精準(zhǔn)可控的人物視頻生成,昆侖萬維還開源了SOTA級別的基于視頻基座模型的表情動作可控算法SkyReels-A1,對標(biāo)Runway的Act-One,SkyReels-A1支持視頻驅(qū)動的電影級表情捕捉,實現(xiàn)高保真微表情還原。能夠基于任意人體比例(包括肖像、半身及全身構(gòu)圖)生成高度逼真的人物動態(tài)視頻,其真實感源自對人物表情變化和情緒的精準(zhǔn)模擬、皮膚肌理、身體動作跟隨等多維度細(xì)節(jié)的深度還原。
友情鏈接: 政府 高新園區(qū)合作媒體
Copyright 1999-2024 中國高新網(wǎng)chinahightech.comAll Rights Reserved.京ICP備14033264號-5
電信與信息服務(wù)業(yè)務(wù)經(jīng)營許可證060344號主辦單位:《中國高新技術(shù)產(chǎn)業(yè)導(dǎo)報》社有限責(zé)任公司