站長(zhǎng)之家(ChinaZ.com)12月28日 消息:騰訊日前發(fā)布的視頻運(yùn)動(dòng)控制器MotionCtrl已經(jīng)正式開源了,并且試用效果非常出色。該項(xiàng)目可以高度自定義相機(jī)鏡頭和畫面物體在3D 空間運(yùn)動(dòng)軌跡,實(shí)現(xiàn)更精細(xì)和多樣化的運(yùn)動(dòng)控制。
Demo:https://huggingface.co/spaces/TencentARC/MotionCtrl
項(xiàng)目地址:https://top.aibase.com/tool/motionctrl
在Demo中包含多步選擇,相對(duì)比較復(fù)雜。用戶需要首先選擇控制鏡頭還是物體,也可以同時(shí)控制兩者。然后需要選擇對(duì)應(yīng)的姿勢(shì),雖然沒有開放自定義,但選擇項(xiàng)相當(dāng)豐富。最后只需要輸入提示詞,等待生成即可。
MotionCtrl能夠獨(dú)立有效地控制攝像機(jī)運(yùn)動(dòng)和物體運(yùn)動(dòng),實(shí)現(xiàn)更精細(xì)和多樣化的運(yùn)動(dòng)控制。其架構(gòu)考慮了攝像機(jī)運(yùn)動(dòng)和物體運(yùn)動(dòng)的固有屬性,通過CMCM和OMCM模塊分別處理這兩種運(yùn)動(dòng)類型。這使得在生成的視頻中可以實(shí)現(xiàn)更細(xì)致的運(yùn)動(dòng)調(diào)整,并靈活地組合這兩種運(yùn)動(dòng)類型,提高了控制的多樣性。
該項(xiàng)目的優(yōu)勢(shì)在于,它可以有效地獨(dú)立控制攝像機(jī)和物體的運(yùn)動(dòng),實(shí)現(xiàn)更精細(xì)的運(yùn)動(dòng)控制,促進(jìn)兩種類型運(yùn)動(dòng)的靈活多樣組合。此外,該技術(shù)的運(yùn)動(dòng)條件由攝像機(jī)的姿勢(shì)和軌跡確定,與視頻中物體的外觀或形狀影響最小。
(舉報(bào))