UniForge3D

UniForge3D är ett forskningsprojekt som skapar kompletta 3D-modeller av föremål från ett fåtal bilder, där man inte vet varifrån bilderna är tagna. Svårigheten är att bevara detaljerna som faktiskt syns på bilderna och samtidigt hitta på rimliga former för de delar som inte syns.

Metoden kombinerar två angreppssätt som brukar hållas isär: rekonstruktion, som räknar fram den form som syns på bilderna, och generering, som använder inlärda kunskaper om hur föremål brukar se ut. Problemet är att de två arbetar i olika koordinatsystem. UniForge3D låter båda arbeta i ett gemensamt koordinatsystem som utgår från en av bilderna, så att de kan utbyta information åt båda håll. För varje del av föremålet väljs sedan den bild som visar den delen bäst, så att detaljerna från den bilden kan föras över till 3D-modellen.

Enligt forskarna ger metoden bäst resultat hittills, både i utseende och form, på testsamlingarna Toys4K och GSO. Projektsidan visar exempel både från datorrenderade bilder och från vanliga foton.

Arbetet kommer från Peking University, Math Magic och Hong Kong University of Science and Technology. Artikeln finns på arXiv, medan koden enligt projektsidan kommer senare.