En enda modell som animerar 3D-figurer med helt olika skelett, från människor och djur till ledade föremål, utifrån en textbeskrivning.
UniMate animerar figurer med olika skelett utifrån text [3]
UniMate gör rörelser till 3D-figurer som redan har ett skelett. Man ger modellen figuren och en textbeskrivning, till exempel att den ska gå eller anfalla, och får tillbaka en animation. Tidigare system har ofta varit låsta till en viss typ av skelett, som människor, eller krävt att modellen tränas om för varje ny figur.
UniMate klarar i stället godtyckliga skelett med en och samma modell och utan extra träning. Det fungerar genom att skelettets uppbyggnad, alltså hur lederna hänger ihop och hur långt det är mellan dem, byggs in i modellens uppmärksamhetsmekanism. Forskarna har också sammanställt datamängden UniML3D med 13 006 rörelsesekvenser för tvåbenta och fyrbenta djur, fåglar, havsdjur, insekter, ormar och ledade föremål, alla med textbeskrivningar.
Utöver att skapa rörelser från text kan UniMate redigera rörelser med text, fylla i rörelsen mellan två poser, förlänga en rörelse och föra över en rörelse mellan figurer med olika skelett. Enligt forskarna slår modellen tidigare metoder i kvalitet, generalisering och effektivitet.
Arbetet kommer från Princeton University tillsammans med UC Berkeley och MIT och presenteras på SIGGRAPH Asia 2026. Koden är MIT-licensierad, medan modellvikterna på Hugging Face har licensen CC BY-NC 4.0, som inte tillåter kommersiell användning.
Inte bedömd än. Alla kan ändra.
Inga kommentarer än. Skriv gärna vilket projekt den kan passa i.