AI音乐平台Suno推出Visuals,让用户为平台上的歌曲制作自动对口型的视频片段,也能通过文字描述生成缩略图和专辑封面。该功能已在网页端、iOS和Android上线,将原有的歌曲创作扩展到图像、视频生成与剪辑。
用户可在创作模式的Visuals标签中进入功能,网页端也能从曲库歌曲的三点菜单打开。制作视频时,先选取最长15秒的歌曲片段,再选择参考图:可以使用Suno提供的原创角色预设、上传自己的照片或画作,也可以输入描述直接生成图片。图片生成支持选择宽高比,以适配横屏、竖屏及不同平台。
视频生成允许将参考图设为首帧或尾帧,方便后续衔接片段;用户还能开启人声自动对口型,调整画幅和时长。Visuals内置独立的视频编辑时间线,可将多个片段拼成较长视频,并添加可自定义的歌词文字,让歌曲配画面、片段拼接与歌词呈现在同一平台完成。
Visuals采用基于MiniMax H3的H3 Move模型。Suno称,模型针对其用户群进行了优化,并加入文字和视觉过滤措施,用于阻止使用或生成特定艺人、公众人物的形象,以及受版权保护的作品和知识产权内容。图片和视频消耗独立的“Visuals积分”,不能与歌曲生成积分混用,使用这项功能需要额外付费。
Suno此前已于10月推出用于生成口语和旁白的Speech功能。此次加入视频,是其在音乐生成业务遭遇多起诉讼后继续拓展产品的一步。部分用户则在发布视频的评论区要求优先改善歌曲生成的音频质量。据The Verge报道。