Did Codex Reset
GitHub

Artificial Analysis, AA-Music v1.1 벤치마크 출시…Suno v6 1위 차지

Artificial Analysis

Artificial Analysis가 자사 Music Arena의 개편된 평가 벤치마크인 AA-Music-Vocal v1.1과 AA-Music-Instrumental v1.1을 출시했다. 해당 벤치마크는 17개 장르에 걸친 1,000개의 신규 프롬프트를 사용하며, 모집된 평가단 패널이 모델의 결과물을 채점한다.

업데이트된 리더보드에서는 Suno v6가 두 벤치마크 모두에서 1위를 차지했으며, Vocal에서 26 Elo, Instrumental에서 31 Elo 차이로 Suno v6-mini를 앞섰다. Mureka V9.5는 Vocal에서 Mureka V9보다 51 Elo 앞서며 3위에 올랐다. Instrumental에서는 Mureka V9, Mureka V9.5, Lyria 3 Pro, Lyria 3.5가 5 Elo 격차 내에 머물며 통계적으로 3위에서 6위 사이 동률을 기록했다. 오픈 웨이트 모델 중에서는 MiniMax Music 3.0이 Vocal 11위, Instrumental 13위로 가장 높은 순위를 기록했으며, Instrumental에서 Stable Audio 3 Medium이 3 Elo 이내 격차를 유지했다.