近日,華為云在HDC 2024大會(huì)上隆重推出其最新力作——盤(pán)古大模型5.0。作為一代先進(jìn)的多模態(tài)生成工具,它在自動(dòng)駕駛領(lǐng)域展現(xiàn)出了非凡的潛力。
華為云CEO張平安表示,盤(pán)古5.0的創(chuàng)新時(shí)空生成技術(shù)(STCG)賦予了模型出色的理解和遵循物理規(guī)律的能力。這意味著生成的駕駛視頻不僅視覺(jué)逼真,更能高度同步車(chē)輛行為、環(huán)境互動(dòng)等現(xiàn)實(shí)因素。
具體而言,模型能夠在不同攝像頭視角之間平滑過(guò)渡,并真實(shí)呈現(xiàn)車(chē)輛在不同天氣和光照條件下的行駛狀態(tài),這充分證明了模型對(duì)空間和時(shí)間維度的精準(zhǔn)把握。
盤(pán)古5.0生成的六攝像頭視角視頻為自動(dòng)駕駛系統(tǒng)提供了全方位、高仿真度的訓(xùn)練素材,極大豐富了訓(xùn)練數(shù)據(jù)集的多樣性。這些視頻涵蓋了從無(wú)車(chē)街道到復(fù)雜多車(chē)交互的各種場(chǎng)景,甚至包括不同氣候條件下的行車(chē)情況。
值得一提的是,模型在生成雨天視頻時(shí),還能細(xì)膩地模擬出車(chē)輛尾燈因光線昏暗而開(kāi)啟的細(xì)節(jié),彰顯了其對(duì)真實(shí)世界復(fù)雜規(guī)律的深度理解和學(xué)習(xí)能力。
張平安在發(fā)布會(huì)上強(qiáng)調(diào),未來(lái),盤(pán)古的多模態(tài)生成能力將拓展更多場(chǎng)景,為自動(dòng)駕駛提供更全面的支持。
(舉報(bào))