Meta 将其 AI 视频技巧引入 Instagram,新功能让用户只需使用文本修改图像即可修改视频 - 从添加光彩到更改背景,以及做几乎任何你能想象到的事情。
Instagram 负责人亚当·莫塞里 (Adam Mosseri) 在视频公告中表示:“我对 Movie Gen 感到非常兴奋,这是我们早期的 AI 研究模型,它可以让你通过简单的文本提示来改变视频的几乎任何方面。”
在视频中,莫塞里穿着原来的衣服,出现在原来的位置——一件灰色夹克和一间看起来很普通的卧室——然后风景开始随机变化,显示他在巴黎、纽约和一个游泳池,并在喜马拉雅山时将他的衣服换成不同的东西,比如一件皮夹克或一件蓬松毛衣。
“你应该能够改变你的服装,或者改变你所处的环境,或者添加一条链子,无论你能想到什么,”莫塞里解释道,展示了他无缝切换背景和改变外貌的演示。
Meta 几个月前宣布推出Movie Gen,展示了一些在质量和及时性方面超越其他模型的版本。该公司还展示了一些由社交媒体影响者(如Paige Piskin )以及社交媒体品牌 10pm Curfew 的Girls和K5sh账户制作的 AI 生成的 Instagram 卷轴。
除了生成视频之外,Movie Gen 还可以处理视频修复,即在保留其他元素不变的情况下更改视频中的特定内容。这使得该模型用途极其广泛,并让用户能够进行许多不同的视觉操作,从更换人物的服装到更换背景,甚至通过操纵场景的整体风格将人物变成木偶般的卡通版本
该技术似乎建立在 Meta 的 Movie Gen AI 模型之上, Decrypt 去年曾报道过该模型。这是该公司对竞争对手类似工具的回应,例如 OpenAI 最近宣布的 Sora 视频生成器、Runway 的修复功能,甚至一些开源工具,如Propainter 。
对于 Instagram 来说,这是 Meta 首次将其视频 AI 功能直接带给用户。Movie Gen 可以制作全新的 16 秒视频或修改现有视频,并配有同步音效和音乐。
生成视频领域最近发展势头迅猛,在经历了较为平静的一年和间隔发布的新片之后,最近几个月宣布了多项非常重要的进展。
Sora 终于问世了,但是也出现了许多有趣的替代品,比如 Invideo V3(能够根据一个想法生成整个脚本、场景和 10 分钟长的视频)、Dream Machine(即使在超现实场景中也能生成连贯逼真的视频)、谷歌的 Veo2(能够以极快的节奏生成高度逼真的视频)和 Showrunner(能够生成小卡通素描)。
Meta 尚未宣布具体的发布日期,但 Mosseri 表示将于 2024 年发布。