MovieGen是Meta的新AI视频制作器它可能会永远改变Instagram和Facebook

几个月前，OpenAI推出了一款名为Sora的令人难以置信的文本转视频AI工具，震惊了世界。整个概念非常简单：告诉AI要制作什么视频，Sora就会为你生成。OpenAI仍未向公众发布该工具，因为它目前还在开发中。我预计Sora将在10月初发布，但这并没有发生。OpenAI的DevDay已经过去，而Sora仍然无法供用户使用。

与此同时，Meta宣布了自己的Sora替代品。它被称为MovieGen，是用于图像和视频编辑的第三代生成式AI产品。MovieGen可以像Sora一样，通过一个文本提示生成视频和音频。它还允许您使用文本提示编辑现有视频。

MovieGen目前还未向用户开放，因为Meta仍在继续开发它。但有一天，它可能会加入社交应用中的MetaAI功能套件，从而彻底改变我们使用Instagram、WhatsApp和Facebook的方式。

Meta在一篇博客文章中解释说，它针对文本转图像和文本转视频模式优化了其MovieGen模型。

这是一个拥有300亿个参数的变换器模型，可以以每秒16帧的速度创建16秒的视频。“这些模型可以推理物体运动、主体与物体之间的相互作用以及相机运动，并且可以学习各种概念的合理运动——这使它们成为同类模型中最先进的模型，”Meta说。

Meta还展示了MovieGen制作个性化视频的能力。您只需上传一个人的图像并将其与文本提示相结合，即可创建一个AI视频，“其中包含参考人物和由文本提示提供的丰富视觉细节”。Meta表示，其“模型在制作保留人类身份和动作的个性化视频方面取得了最先进的成果。”

在这里我要告诉你，这些功能可能会被滥用来制作虚假视频，这些视频可能会迅速传播，传播错误信息。这可能是我们目前没有在野外使用MovieGen的原因之一，尽管Meta在博客文章中没有提到滥用问题。

接下来，MovieGen还可用于编辑真实视频。您可以提交自己的剪辑，然后指示AI进行编辑。MovieGen具有“高级图像编辑、执行局部编辑(例如添加、删除或替换元素)以及全局更改(例如背景或样式修改)”的功能。该模型将保留原始内容并仅针对需要更改的像素。

这又一次为现实世界中的滥用打开了大门。有些人会用它来制作有趣的视频来娱乐，而其他人可能想用人工智能编辑真实视频来扭曲事实。

Meta详细介绍的最后一个MovieGen功能是音频生成。Meta训练了一个130亿参数的音频生成模型，该模型可以查看包含长达45秒的视频的提示和文本提示，以创建环境声音、音效和乐器背景音乐。所有内容都将同步以协同工作。

Meta还发表了一篇关于MovieGen技术的论文。Meta表示，在人体测试中，其模型的表现优于包括OpenAI的Sora在内的竞争对手。

至于MovieGen何时可用，Meta表示将与电影制作人和创作者合作，整合他们的反馈。最终，MovieGen将在Meta的社交应用中推出。上面的截图来自Meta的AI生成和AI编辑的剪辑。您可以通过此链接查看Meta博客中的所有MovieGen示例。