美国AI音乐巨头进军视频生成,底层模型来自中国

美国AI音乐巨头进军视频生成,底层模型来自中国

(文/王一 编辑/吕栋)

美国人工智能(AI)音乐生成平台Suno正将业务从AI音乐创作拓展至视频领域,而这款新工具背后的技术支持,来自中国AI公司MiniMax。

当地时间11月17日,Suno宣布推出名为Visuals的新工具,允许用户根据文字提示、音乐或图像生成最长15秒的视频,可用于制作音乐视频、歌词视频和专辑封面等。

在宣布产品上线的一篇文章中,Suno首席产品官杰克·布罗迪(Jack Brody)指出,Suno是一家“创意娱乐”公司,业务发展方向并不局限于音乐。“Suno最初源于一个简单的信念:每个人都有创造力。只要拥有合适的工具,人们就能创作出原创作品,并在将想法变为现实的过程中获得乐趣。”

布罗迪表示,视频一直是Suno发展愿景中顺理成章的下一步,但直到最近,视频生成技术的速度仍然较慢,成本也过于高昂,只有企业才有能力使用。而新一代模型的出现改变了这一局面,让普通用户也能利用视频生成技术进行创意娱乐。

据Suno方面介绍,Visuals由H3 Move模型驱动。该模型基于中国AI公司MiniMax的H3模型开发,并根据Suno对社区用户使用需求的判断进行了微调和优化。

Suno

与其他AI视觉生成工具不同,Suno的Visuals专门针对用户创作的音乐进行设计,能够与音乐作品的结构和叙事相匹配。

Visuals的推出也为Suno开辟了新的变现渠道。该工具的视频生成积分与音乐生成积分分开计算,免费用户在耗尽额度前只能生成一段5秒的视频。若想继续使用,必须付费购买额外积分。

Visuals官网显示,用户支付14.99美元,即可获得2500个视频专用积分,按标准生成模式计算,约可制作75秒音乐视频。而在Suno的会员套餐中,只有月费最高的120美元档位包含2万个视频积分,折合约11分钟的视频生成时长。

按此计算,Suno生成视频的成本约为每分钟10美元以上。不过,这还只是视频生成环节的费用,若将后续剪辑、反复调整提示词以及多次生成所消耗的积分计算在内,最终制作一段完整音乐视频的实际成本可能更高。

此外,Suno还在介绍Visuals的文章中特别强调,公司在原有音乐内容保护措施的基础上,新增了“额外的安全保障”,以防止艺术家的肖像或作品被未经授权使用。

这些新措施包括启用新的文本和视觉过滤器,以拦截试图上传或生成特定艺术家、公众人物、受版权保护作品及知识产权形象的文件和提示词。

在向用户提供视频之前,公司还会对生成内容进行扫描,确保其不违反社区关于各类“有害内容”的规定。所有视觉内容在分享至平台外之前,也都会嵌入水印。

Suno表示,将把这些保护措施与平台内的用户教育结合起来。当Suno用户首次尝试上传视频或图像供Visuals使用时,系统会提醒他们,该工具旨在用于原创创作,并要求他们确认自己拥有所上传文件的使用权。如果用户滥用该工具,可能面临内容被删除、账户使用受到限制,甚至账户被永久封禁等处罚。

Suno此次推出Visuals,距离OpenAI停止运营其短视频生成工具Sora仅过去约半年。Sora此前也能够在生成视频时附带背景音乐,但其使用受版权保护的角色、品牌和图像遭到了版权方的质疑。

近几个月来,Suno面临的法律诉讼也在不断增加。例如,已故摇滚明星“猫王”埃尔维斯·普雷斯利的遗产管理方、歌手杰森·伊斯贝尔等本月初对Suno提起集体诉讼,指控该公司涉嫌侵犯他们的姓名权、肖像权、形象权和声音权益。