站長之家(ChinaZ.com)12月25日 消息:Lightricks公司最近發(fā)布了LongAnimatediff項目,這一次主要解決的問題是Animatediff一次只能生成16幀視頻的限制。而LongAnimatediff則包括兩個模型,一個可以最多一次生成64幀的視頻,另一個可以生成32幀的視頻,而且32幀那個效果更好。
目前,Animatediff一次只能生成16幀的視頻,更多的幀數(shù)是通過上下文疊加的方式實現(xiàn)的。然而,這種方法存在著生成時間過長后,視頻一致性迅速下降,畫面崩壞的問題。
項目地址:https://github.com/Lightricks/LongAnimateDiff/
LongAnimatediff項目提供了兩個模型,其中一個可以最多一次生成64幀的視頻,另一個可以生成32幀的視頻。32幀那個效果更好一些。
使用LongAnimatediff的方法很簡單,只需直接去Huggingface下載模型,然后用ComfyUI加載就可以了。需要注意的是,64幀模型的Motion_scale要調(diào)整到1.28,而32幀的Motion_scale要調(diào)整到1.15。
在進行了對比測試之后,發(fā)現(xiàn)32幀的模型在生成非正方形內(nèi)容的畫面時會出現(xiàn)拉伸的情況。而64幀模型在生成64幀的畫面時會出現(xiàn)崩壞,但生成32幀的畫面時則沒有問題,且效果也很好。因此,目前推薦使用64幀的模型。
(舉報)