Suno推出图像与视频生成功能,这是该公司在拓展AI音乐平台业务版图上的最新举措。这项名为"Visuals"的新功能,可以让用户将Suno创作的歌曲转化为能够自动与歌词口型同步的AI生成视频片段,或者通过提示词描述生成图像,用作缩略图和专辑封面。

Visuals功能已在网页版、iOS和Android平台上线。虽然在Suno的桌面端和移动端界面上布局略有不同,但用户都可以在创作模式下找到新的Visuals标签页。网页版用户还可以通过在音乐库中选择某首歌曲旁的三点菜单来访问该功能。在这里,用户可以选择要使用歌曲的哪个片段(最长15秒),并选择一张参考图像来生成视频片段。

起始图像参考有三种选择方式:使用Suno提供的原创角色预设、上传自己的照片或作品,或者通过描述性提示词直接在Suno上生成图像。图像生成功能还允许用户选择特定的宽高比,以适配横屏或竖屏模式及各类在线平台。

在视频生成方面,用户可以选择将参考图像用作起始帧或结束帧,从而更便捷地将15秒的片段剪辑在一起。系统还提供了自动将人声与生成视频进行口型同步的开关,以及调整宽高比和片段长度的工具。Visuals功能还包含专门的视频编辑时间轴,用于将多个片段组合成更长的视频,并添加可自定义的歌词文本。

Visuals功能由H3 Move AI模型驱动,该模型基于MiniMax的H3打造。Suno表示,这项AI已经"针对我们的社区进行了优化,包括增加了额外的保护和防护措施",其中包括一套"全新的文本和视觉过滤系统",旨在阻止用户使用或生成特定艺术家、公众人物、受版权保护作品及知识产权的形象。Visuals使用独立的"Visuals积分"来生成视频和图像,这与制作AI音乐所使用的歌曲积分不同,这意味着Suno用户要使用这项新功能还需要支付额外费用。

Visuals功能的发布,紧随Suno在10月推出的用于生成语音旁白的Speech功能之后。在Suno的音乐生成器引发多起备受关注的诉讼之后,增加视频功能是该公司分散业务重心的又一次尝试,不过似乎有些用户更希望该公司专注于改进现有的歌曲生成能力。在Visuals发布的YouTube视频下方,一位用户评论道:"先把音频修好,别加这些没人要的垃圾功能"——这一观点也得到了其他评论者的呼应。

The Verge