站長之家(ChinaZ.com)6月13日 消息:6月13日,3D建模平臺Luma AI推出了一款名為Dream Machine的新型文生視頻模型,并向所有用戶免費開放。Dream Machine不僅支持文本生成視頻,還能利用圖片作為引導來創(chuàng)造視頻內(nèi)容。其生成的視頻在質(zhì)量、動作一致性、色彩、光影、飽和度和運鏡等方面與OpenAI的Sora相媲美。
Dream Machine的一大技術亮點是支持物理模擬,這使得生成的視頻能夠更真實地反映物理世界的特性,如重力下落、碰撞和光影變化等。物理模擬在文生視頻領域尤為重要,它確保了視頻在時間和空間上的連貫性和一致性。
動態(tài)模擬和物理一致性是生成高質(zhì)量視頻的核心。這要求模型能夠精確模擬物體和場景的運動,以及物體之間的相互作用,如重力、碰撞、摩擦力和空氣阻力等。為了實現(xiàn)這一點,文生視頻模型通常會使用大量的現(xiàn)實世界視頻數(shù)據(jù)進行學習。
Dream Machine生成的視頻案例展示了其出色的效果,盡管由于免費開放導致使用人數(shù)眾多,生成效率受到影響,但生成的視頻質(zhì)量仍然非常高。例如,有用戶生成了一個廢墟場景的視頻,效果堪比虛幻引擎5的游戲場景;還有用戶生成了一輛跑車在高速公路上飛奔的視頻,運鏡和場景切換非常連貫和流暢。
與OpenAI的Sora相比,Dream Machine和國內(nèi)快手發(fā)布的“可靈”等產(chǎn)品已經(jīng)全面開放使用,且在視頻質(zhì)量上不輸Sora。這預示著文生視頻賽道的競爭將變得更加激烈。
Dream Machine點擊體驗:https://top.aibase.com/tool/dream-machine
快手可靈點擊體驗:https://top.aibase.com/tool/kelingdamoxing
(舉報)