Artificial Analysis 发布 AA-Music-Vocal 与 AA-Music-Instrumental v1.1 音乐评测基准

我们发布了 AA-Music-Vocal v1.1 和 AA-Music-Instrumental v1.1，这是支撑 Artificial Analysis Music Arena 的新基准，基于 1,000 条新提示词、涵盖 17 个流派，并由我们招募的评估员小组进行评分。

在过去 3 个月里，Suno v6、Lyria 3.5、Mureka V9.5、Eleven Music v2.5 和 MiniMax Music 3.0 等旗舰模型的发布，为 AI 音乐生成的质量树立了新标杆。如今，模型只需一条文本提示就能写出完整的歌曲，生成精巧的歌词、逼真的演唱、复杂的编曲以及符合该流派风格的真实器乐演奏。随着质量的提升，模型之间的差异变得更加细微，这要求我们的 AA-Music 排行榜具备更好、更细致的评估能力。

更新后的 Artificial Analysis Music 排行榜的初步洞察：

➤ Suno v6 在两个基准上均排名第 1，在 Vocal 上比 Suno v6-mini 高 26 Elo，在 Instrumental 上高 31 Elo。Suno 在两个排行榜上都包揽了前两名。

➤ Mureka V9.5 在 Vocal 上排名第 3，比 Mureka V9 高 51 Elo，这是 Vocal 榜上同一模型系列两个版本之间最大的提升幅度。

➤ Mureka V9、Mureka V9.5、Lyria 3 Pro 和 Lyria 3.5 在 Instrumental 上并列第 3 至第 6 名，统计上不分伯仲，彼此差距在 5 Elo 以内。

➤ MiniMax Music 3.0 是领先的开放权重音乐模型，在 Vocal 上排名第 11，在 Instrumental 上排名第 13。Stable Audio 3 Medium 在 Instrumental 上与它相差不到 3 Elo。

详见下文 v1.1 的更新内容以及领先模型的示例曲目🧵