Zo werkt een wereldmodel dat werelden bouwt terwijl je kijkt
Een wereldmodel is een AI-model dat een virtuele wereld maakt en laat reageren op wat jij doet. Het speelt nu omdat Google met Genie 4 laat zien dat zulke werelden realistischer worden.
Wat heb je eraan: Je snapt zo waarom zulke modellen interessant zijn voor games, films en het trainen van robots.
Denk aan een verteller die een verhaal verzint terwijl jij erdoorheen loopt en elke keer aanpast als je een andere kant op gaat. Een wereldmodel maakt beeld en geluid op dezelfde manier steeds opnieuw, afgestemd op wat jij op dat moment doet.
Hoe maakt een wereldmodel beeld dat meebeweegt?
Een chatbot voorspelt woord voor woord welke tekst logisch volgt. Een wereldmodel doet iets vergelijkbaars met beelden. Het voorspelt wat er in het volgende plaatje te zien moet zijn.
Het model heeft dat geleerd van heel veel video's, waarin je ziet hoe water stroomt, hoe een bal stuitert en hoe mensen lopen. Daardoor weet het ongeveer hoe de wereld zich gedraagt. Het hoeft dus geen wereld uit te rekenen die al klaarstaat.
Elke stap die jij zet, wordt een nieuwe aanwijzing voor het volgende beeld. Loop je naar links, dan bouwt het model links iets op. Zo ontstaat de wereld terwijl je kijkt.
Waarin verschilt een wereldmodel van een computerspel?
Bij een gewoon spel hebben makers alles vooraf getekend en geprogrammeerd. Een deur gaat open omdat iemand dat zo heeft vastgelegd. Een wereldmodel verzint de deur pas als je ernaartoe loopt.
Daardoor kun je een wereld bestellen met een prompt, zoals je een afbeelding bij ChatGPT bestelt. Je typt een strand bij storm, en je kunt erdoorheen lopen. Dat werkt ook midden in de wereld, bijvoorbeeld door het weer te veranderen.
Het nadeel is dat het model geen vaste kaart heeft. Het moet onthouden wat het eerder liet zien, en dat gaat na een tijd mis. Zo kan een boom ineens van plek of vorm veranderen. Genie 4 van Google DeepMind is hier een voorbeeld van, met werelden die ongeveer twee minuten samenhangen.
Waarvoor gebruik je een wereldmodel straks zelf?
Een regisseur kan met zo'n model snel een voorbeeldscène bekijken voordat de opnames beginnen. Een spelmaker test een idee zonder weken te bouwen. Het gaat dan om schetsen, niet om het eindproduct.
Ook robots kunnen ervan leren. Een robot oefent liever duizend keer in een nagemaakte wereld dan één keer in een echte kamer waar iets kapot kan. Hoe beter de nagemaakte wereld klopt, hoe nuttiger die oefening is.
Let dus op de woorden van de makers: dit zijn beloftes van bedrijven en nog geen onafhankelijke tests. Kijk bij nieuwe demonstraties of de wereld ook na langere tijd klopt. Dat zegt meer over de kwaliteit dan een mooi eerste beeld.
Gemeld door 3 bronnen: Google DeepMind, The Verge AI, Ars Technica AI
Lees de bron (naar de bron)Klopt er iets niet?
Elke ochtend het AI-nieuws in je mail
Om 07:00 de belangrijkste berichten, in gewone taal. Gratis, en afmelden kan altijd met één klik. Je meldt je aan bij Buttondown, de dienst die de nieuwsbrief voor ons verstuurt.