扎克伯格最近忙着在全世界「搶風頭」。
前不久,開啟「二次創業」的他剛向我們展示了十年磨一劍的最強 AR眼鏡 Meta Orion,儘管這只是一款押注未來的原型機器,卻搶光了蘋果 Vision Pro的風頭。
而在昨晚,Meta在視頻生成模型賽道再次大出風頭。
Meta表示,全新發佈的 Meta Movie Gen是迄今為止最先進的「媒體基礎模型(Media Foundation Models)」。
不過,先打個預防針,Meta官方目前尚未給出明確的開放時間表。
官方宣稱正在積極地與娛樂行業的專業人士和創作者進行溝通和合作,預計將在明年某個時候將其整合到 Meta自己的產品和服務中。
簡單總結一下 Meta Movie Gen的特點:
擁有個性化視頻生成、精確視頻編輯和音頻生成等功能。
支持生成1080P、16秒、每秒16幀的高清長視頻
能夠生成最長45秒的高質量和高保真音頻
輸入簡單文本,即可實現複雜的精確視頻編輯功能
演示效果優秀,但該產品預計明年才會正式向公眾開放
告別「啞劇」,功能主打大而全
細分來說,Movie Gen具有視頻生成、個性化視頻生成、精確視頻編輯和音頻生成四大功能。
文生視頻功能早已成為視頻生成模型的標配,只是,Meta Movie Gen能夠根據用戶的需求生成不同長寬比的高清視頻,這在業內尚屬首創。
Text input summary: A sloth with pink sunglasses lays on a donut float in a pool. The sloth is holding a tropical drink. The world is tropical. The sunlight casts a shadow.
Text input summary: The camera is behind a man. The man is shirtless, wearing a green cloth around his waist. He is barefoot. With a fiery object in each hand, he creates wide circular motions. A calm sea is in the background. The atmosphere is mesmerizing, with the fire dance.
此外,Meta Movie Gen提供了高級的視頻編輯功能,用戶只需通過簡單的文本輸入即可實現複雜的視頻編輯任務。
從視頻的視覺風格,到視頻片段之間的過渡效果,再到更細緻的編輯操作,這一點,該模型也給足了自由。
在個性化視頻生成方面,Meta Movie Gen也前邁進了一大步。
用戶可以通過上傳自己的圖片,利用 Meta Movie Gen生成既個性化但又保持人物特徵和動作的視頻。
Text input summary: A cowgirl wearing denim pants is on a white horse in an old western town. A leather belt cinches at her waist. The horse is majestic, with its coat gleaming in the sunlight. The Rocky Mountains are in the background.
從孔明燈到透明彩色泡泡,一句話輕鬆替換視頻同一物體。
Text input: Transform the lantern into a bubble that soars into the air.
儘管今年陸續已有不少視頻模型相繼亮相,但大多只能生成「啞劇」,食之無味棄之可惜,Meta Movie Gen也沒有「重蹈覆轍」。
用戶可以通過提供視頻文件或文本內容,讓 Meta Movie Gen根據這些輸入生成相對應的音頻。(PS:注意滑板落地的配音)















