YuE2

YuE2 är uppföljaren till musikmodellen YuE och kommer från forskargemenskapen Multimodal Art Projection (M-A-P) tillsammans med bland annat HKUST, NYU, Stanford, MBZUAI, Tokenwave.AI, NOIZ och ACE Studio. Det speciella är att modellen arbetar i två steg: först skriver den ett notblad för låten, och sedan gör den om det till inspelad musik med sång och komp. Notbladet går att läsa och ändra, så man kan justera melodi, text, tempo och arrangemang och sedan låta modellen spela in en ny version.

Samma modell kan också göra covers: den lyssnar på en befintlig inspelning, skriver ner melodin som noter och gör en ny tolkning. Det finns dessutom en färdighet för AI-agenter där man ger musikalisk återkoppling i en konversation och agenten ändrar noter, stil eller text. Sedan slutet av september 2026 kan den också göra ren instrumentalmusik. Modellen har cirka 3,6 miljarder parametrar och ger stereoljud i 48 kHz. Träningsdatan är enligt forskarna främst fri musik (CC0) och syntetisk musik.

Enligt forskarna får YuE2 högst snittbetyg på deras egen testsvit WildSongBench, 6,96 mot 6,87 för Suno v5, när man låter den göra åtta försök och väljer det bästa. Vikterna finns på Hugging Face och koden på GitHub. Koden är Apache 2.0, medan vikterna har licensen CC BY-NC 4.0 med ett tillägg: privatpersoner, kreatörer och musiker får använda modellen och tjäna pengar på låtarna utan avgift, men företag som vill använda vikterna kommersiellt måste kontakta teamet. Den kräver ett NVIDIA-grafikkort med 24 GB minne, och det finns en gratis webbdemo hos NOIZ.