4DAnyone

4DAnyone är ett forskningsprojekt som återskapar människor i 4D, alltså i 3D över tid, från en helt vanlig video. Normalt kräver sådana modeller en uppsättning synkroniserade och kalibrerade kameror runt personen. 4DAnyone klarar sig med en enda video, utan kända kamerainställningar och utan stativ, genom att i stället generera de videor som en sådan kamerarigg skulle ha spelat in.

Det svåra är att de genererade vyerna måste hänga ihop tillräckligt bra för att man ska kunna bygga en 4D-modell av dem, och det kräver tiotals vyer. Forskarna löser det med två tekniker som komprimerar och delar information mellan grupper av vyer, och med ett 3D-skelett från originalvideon som styr genereringen i varje vy. De färdiga videorna används sedan för att träna en 4D Gaussian Splatting-modell.

Enligt projektsidan presterar 4DAnyone bättre än tidigare metoder både i videokvalitet från nya vinklar och i den slutliga 4D-rekonstruktionen. Efter lanseringen har forskarna släppt en snabbare destillerad version, 4DAnyone-Turbo, minskat minnesbehovet så att modellen går att köra på ett RTX 4090 och lagt till ett grafiskt gränssnitt.

Arbetet kommer från Zhejiang University, Robbyant och Ant Group, HKUST och CUHK, och har antagits till SIGGRAPH Asia 2026. Koden ligger hos Ant Research på GitHub.