Meta近日发布了Meta Movie Gen,这是一款利用人工智能(AI)生成长达16秒的16fps视频的新工具。
该工具使用文字提示创建带有同步的AI生成音频的视频片段。据该公司称,Movie Gen可以使用一张照片生成个性化的AI视频。
Meta表示,该工具在公开发布之前仍在测试中。
Movie Gen有4个功能:视频生成、个性化视频生成、精确视频编辑和音频生成。
Meta表示,Movie Gen的编辑转化可以进行局部编辑,如添加、删除或替换元素,以及全局修改,如背景或风格修改。“与要求专业技能或缺乏精度的生成工具不同,Movie Gen保留了原始内容,只针对相关像素。”
对于音频,Meta训练了一个13B参数音频生成模型,该模型可以接收视频和可选文字提示,并生成长达45秒的音频,包括环境声音、音效和器乐曲背景音乐——所有这些都与视频内容同步。
来自使用文字输入概要创建的Meta视频截图