ACE Music v1 обошла Suno в рейтинге вокальной AI-музыки

Что произошло

ACE Music v1 от ACE Studio возглавила рейтинг Artificial Analysis для песен с вокалом. Модель получила 1 160 очков Elo, опередив Suno v6 с 1 144 очками.

В рамках AA-Music-Vocal v1.1 оцен evaluators прослушивают композиции, созданные по одинаковым запросам, не зная, какая модель их сгенерировала, а затем выбирают понравившийся вариант. На основе этих предпочтений рассчитывается рейтинг в формате Elo.

Результаты практического тестирования

В практических тестах Decrypt ACE Music стабильно создавала более мелодичные и связные композиции в популярных стилях. Вокал в целом звучал естественнее, с меньшим количеством синтетических артефактов, неестественной автокоррекции и ошибок в произношении.

ACE также лучше справлялась с концовками песен. В то время как Suno иногда добавляла в финале странные звуки, лишние повторы или резкие музыкальные изменения, ACE чаще сохраняла структуру композиции и завершала её чище.

Модель создаёт полноценные песни по текстовому описанию или предоставленным пользователем словам. Ранее ACE Studio была сосредоточена на синтезе певческого голоса по MIDI-нотам и текстам.

Почему это важно

Результат показывает, что ACE Music v1 стала заметным конкурентом Suno в генерации песен с вокалом. При этом преимущество ACE ограничено: разница в рейтинге относительно небольшая, а доверительные интервалы моделей пересекаются.

Suno по-прежнему сильнее проявила себя в инструментальной музыке и в некоторых сложных тяжёлых стилях.

Ограничения модели

В тесте с мелодичным дэт-металом ACE регулярно генерировала треки с чистым женским вокалом, но без ожидаемой для жанра агрессивной подачи. Кроме того, модель в целом путала разные направления металла.

Suno в аналогичных сложных запросах предлагала более творческие аранжировки и лучше соблюдала стилистические особенности тяжёлой музыки.