Meta 將其 AI 視頻技巧引入 Instagram,新功能讓用戶只需使用文本修改圖像即可修改視頻 - 從添加光彩到更改背景,以及做幾乎任何你能想象到的事情。
Instagram 負責人亞當·莫塞裡 (Adam Mosseri) 在視頻公告中表示:“我對 Movie Gen 感到非常興奮,這是我們早期的 AI 研究模型,它可以讓你通過簡單的文本提示來改變視頻的幾乎任何方面。”
在視頻中,莫塞裡穿著原來的衣服,出現在原來的位置——一件灰色夾克和一間看起來很普通的臥室——然後風景開始隨機變化,顯示他在巴黎、紐約和一個游泳池,並在喜馬拉雅山時將他的衣服換成不同的東西,比如一件皮夾克或一件蓬鬆毛衣。
“你應該能夠改變你的服裝,或者改變你所處的環境,或者添加一條鏈子,無論你能想到什麼,”莫塞裡解釋道,展示了他無縫切換背景和改變外貌的演示。
Meta 幾個月前宣佈推出Movie Gen,展示了一些在質量和及時性方面超越其他模型的版本。該公司還展示了一些由社交媒體影響者(如Paige Piskin )以及社交媒體品牌 10pm Curfew 的Girls和K5sh賬戶製作的 AI 生成的 Instagram 卷軸。
除了生成視頻之外,Movie Gen 還可以處理視頻修復,即在保留其他元素不變的情況下更改視頻中的特定內容。這使得該模型用途極其廣泛,並讓用戶能夠進行許多不同的視覺操作,從更換人物的服裝到更換背景,甚至通過操縱場景的整體風格將人物變成木偶般的卡通版本
該技術似乎建立在 Meta 的 Movie Gen AI 模型之上, Decrypt 去年曾報道過該模型。這是該公司對競爭對手類似工具的回應,例如 OpenAI 最近宣佈的 Sora 視頻生成器、Runway 的修復功能,甚至一些開源工具,如Propainter 。
對於 Instagram 來說,這是 Meta 首次將其視頻 AI 功能直接帶給用戶。Movie Gen 可以製作全新的 16 秒視頻或修改現有視頻,並配有同步音效和音樂。
生成視頻領域最近發展勢頭迅猛,在經歷了較為平靜的一年和間隔發佈的新片之後,最近幾個月宣佈了多項非常重要的進展。
Sora 終於問世了,但是也出現了許多有趣的替代品,比如 Invideo V3(能夠根據一個想法生成整個腳本、場景和 10 分鐘長的視頻)、Dream Machine(即使在超現實場景中也能生成連貫逼真的視頻)、谷歌的 Veo2(能夠以極快的節奏生成高度逼真的視頻)和 Showrunner(能夠生成小卡通素描)。
Meta 尚未宣佈具體的發佈日期,但 Mosseri 表示將於 2024 年發佈。