Movie Gen是一款由 Meta AI 发布的文本生成视频、音频与视频编辑研究模型。
Movie Gen 是 Meta AI 的媒体生成研究成果。覆盖文本生成视频与声音、基于文本编辑已有视频,还有个性化视频等能力。怎么说呢,它不是普通消费级剪辑软件。而是一组面向高质量媒体生成任务的基础模型。
论文展示了 1080p 视频、同步音频、个性化人物视频和指令式视频编辑能力,主要探索视频、音频和人物一致性生成的模型程序。

文本生成视频:根据文字提示生成高质量视频,支持不同画幅和复杂场景描述。
同步音频:可生成与视频内容匹配的声音和音效,提高沉浸感。
视频编辑:通过文字指令修改已有视频中的元素、风格或场景表现。
个性化视频:基于人物图像和文本提示生成保留人物身份特征的视频。
适合影视研究人员、生成式 AI 开发者和需要探索高质量视频生成技术的团队。老实说,可用于研究文本生成视频、视频内容编辑、同步声音生成还有人物个性化视频等任务。尤其适合进行生成式媒体技术验证和新型视频创作流程探索。
Movie Gen官网地址:https://ai.meta.com/research/movie-gen/