PixVerse World (R2)

PixVerse World är en webbplats med interaktiva videoupplevelser: berättelsevärldar, karaktärer och scener som genereras löpande och reagerar direkt på vad användaren gör. Man väljer en upplevelse i ett galleri, till exempel en värld som utvecklas efter ens val eller en karaktär att prata med, och videon fortsätter sedan att genereras utifrån det man skriver eller styr.

Bakom tjänsten ligger PixVerse R2, uppföljaren till R1 som PixVerse beskriver som den första allmänt lanserade världsmodellen för ljud och video i realtid. R2 genererar bild och ljud synkront i en obruten ström och tar emot text, referenser, ljud och styrkommandon (som WASD-tangenter) medan den kör. Modellen har ett minne i flera tidsskalor, med beständiga regler och identiteter, den senaste historiken och tillståndet för enskilda objekt, för att världen ska hänga ihop över längre tid.

Enligt PixVerse har man förenklat träningen till två steg och snabbat upp modellen med bland annat gles uppmärksamhet och destillering till väldigt få beräkningssteg. Företagets egna mätningar visar till exempel mindre ljusdrift i långa videor. Upplösning, fördröjning och prissättning anges inte i blogginlägget, och vikterna är inte släppta.