Blogs

Wat is Google DeepMind Genie 3? De nieuwe grens voor wereldmodellen

Wat is Google DeepMind Genie 3? De nieuwe grens voor wereldmodellen

Google DeepMind heeft Genie 3 aangekondigd, een algemeen wereldmodel dat een grote sprong voorwaarts betekent in door AI gegenereerde interactieve omgevingen. Dit systeem kan dynamische werelden genereren die je in realtime kunt verkennen met 24 frames per seconde, met consistentie op 720p-resolutie gedurende enkele minuten.

Dit is geen traditionele videogeneratie. Genie 3 creëert omgevingen die je kunt verkennen en waarmee je kunt interacteren terwijl ze worden gegenereerd.


Wat is een wereldmodel?

Voordat je Genie 3 begrijpt, is het de moeite waard om te definiëren wat een “wereldmodel” eigenlijk betekent.

Wereldmodellen zijn AI-systemen die hun begrip van de wereld gebruiken om aspecten ervan te simuleren. Ze stellen AI-agents in staat te voorspellen hoe een omgeving zich ontwikkelt en hoe hun acties daarop van invloed zijn.

Zie het als het verschil tussen:

  • Videogeneratie: een vooraf gerenderde clip maken die je kunt bekijken
  • Wereldmodellering: een continue omgeving maken die je kunt verkennen en beïnvloeden

Google DeepMind loopt al meer dan tien jaar voorop in dit onderzoek, van het trainen van agents om realtime strategiespellen te beheersen (AlphaStar) tot het ontwikkelen van gesimuleerde omgevingen voor robotica.


De evolutie: van Genie 1 naar Genie 3

Genie 3 bouwt voort op twee eerdere iteraties:

Genie 1 (2024): het eerste foundation-wereldmodel dat vanuit beelden nieuwe omgevingen voor AI-agents kon genereren.

Genie 2 (2024): een grootschalig foundation-wereldmodel dat de mogelijkheden uitbreidde, maar geen realtime-interactie bood.

Genie 3 (2026): het eerste wereldmodel in de reeks dat realtime-interactie mogelijk maakt, met verbeterde consistentie en realisme ten opzichte van Genie 2.

Google DeepMind beschrijft wereldmodellen als “een belangrijke tussenstap op weg naar AGI”, omdat ze het mogelijk maken AI-agents te trainen in onbeperkte, rijke simulatieomgevingen.


Kernmogelijkheden van Genie 3

Fysieke eigenschappen van de wereld modelleren

Genie 3 kan natuurverschijnselen simuleren, zoals waterdynamica, lichteffecten en complexe interacties in de omgeving.

Getoonde voorbeeldprompts:

  • Navigeren over vulkanisch terrein met een robot op wielen terwijl lavameren worden vermeden
  • Jetskiën tijdens een lichtjesfestival
  • Lopen langs een kust in Florida tijdens een orkaan, met golven die over de weg slaan
  • Een kwal volgen door hydrothermale bronnen in de diepzee
  • Een helikopter besturen boven kustkliffen

De natuurlijke wereld simuleren

Het systeem genereert levendige ecosystemen met realistisch diergedrag en gedetailleerd plantenleven.

Voorbeeldprompts:

  • Rennen door gletsjerlandschappen met ontmoetingen met wilde dieren
  • Zwemmen door bioluminescente scholen kwallen in de diepe oceaan
  • Een Japanse zentuin verkennen met geharkte zandpatronen
  • Navigeren door dichte, door regen doordrenkte begroeiing

Animatie en fictie

Genie 3 put uit de verbeelding en creëert fantastische scenario’s en expressieve geanimeerde personages in meerdere visuele stijlen.

Voorbeeldprompts:

  • Een pluizig wezen dat over een regenboogbrug rent (3D-animatiestijl)
  • Een hagedis zijn in origamistijl
  • Als vuurvlieg vliegen door betoverde boomhutten
  • Iers landschap dat een dramatische zwaartekrachttransformatie ondergaat

Locaties en historische settings verkennen

Het systeem kan geografische en temporele grenzen overstijgen.

Voorbeeldprompts:

  • Bergachtig terrein in de Alpen
  • Venetië per vaporetto met realistische weerspiegelingen in de kanalen
  • Het Paleis van Knossos op het oude Kreta zoals het in zijn bloeitijd zou hebben gestaan
  • Fietsen over de gevaarlijke Killar-Kishtwar Road in India

Technische doorbraken

Realtime-interactiviteit

Realtime-prestaties van 24 fps bereiken vroeg om aanzienlijke technische innovatie. Tijdens autoregressieve framegeneratie moet het model rekening houden met het volledige eerder gegenereerde traject.

Bijvoorbeeld: als een gebruiker na een minuut verkennen een locatie opnieuw bezoekt, verwijst het model naar relevante informatie van dat eerdere moment—terwijl het meerdere keren per seconde rekent om te reageren op nieuwe gebruikersinvoer zodra die binnenkomt.

Omgevingsconsistentie over lange horizonten

Door AI gegenereerde omgevingen moeten fysiek consistent blijven om meeslepend te zijn. Dit is technisch moeilijker bij realtime-generatie dan bij vooraf gerenderde video, omdat onnauwkeurigheden zich in de loop van de tijd opstapelen.

Omgevingen van Genie 3 blijven “grotendeels consistent gedurende enkele minuten, met visueel geheugen dat teruggaat tot een minuut geleden.” Google DeepMind merkt op dat dit een emergente capaciteit is—anders dan bij NeRFs of Gaussian Splatting heeft Genie 3 geen expliciete 3D-representaties nodig.

Wereldgebeurtenissen via prompts

Naast navigatiebesturing maakt Genie 3 tekstgebaseerde interventies mogelijk die de gegenereerde wereld wijzigen:

  • Weersomstandigheden veranderen
  • Nieuwe objecten en personages introduceren
  • De omgeving midden in de ervaring aanpassen

Dit verruimt het scala aan “wat als”-scenario’s—cruciaal om AI-agents te trainen in het omgaan met onverwachte situaties.


Onderzoek naar belichaamde agents voeden

Een belangrijke toepassing is het trainen van AI-agents in gegenereerde omgevingen. Google DeepMind testte Genie 3 met hun SIMA-agent (een generalistische agent voor virtuele 3D-omgevingen).

Het proces:

  1. Genereer een wereld met een specifieke setting
  2. Instrueer de agent om afzonderlijke doelen na te streven
  3. De agent stuurt navigatieacties naar Genie 3
  4. Genie 3 simuleert de toekomst op basis van die acties (zonder de doelen van de agent te kennen)

Omdat Genie 3 consistentie behoudt, kunnen agents langere actiereeksen uitvoeren en complexere doelen bereiken. Google DeepMind verwacht dat deze technologie een cruciale rol speelt terwijl ze richting AGI werken.


Huidige beperkingen

Het team erkent verschillende beperkingen:

Beperking Beschrijving
Beperkte actieruimte Hoewel gebeurtenissen via prompts brede ingrepen in de omgeving mogelijk maken, blijven directe acties van agents beperkt
Interactie tussen meerdere agents Complexe interacties tussen meerdere onafhankelijke agents blijven een uitdaging
Geografische nauwkeurigheid Kan locaties in de echte wereld niet met perfecte nauwkeurigheid simuleren
Tekstweergave Duidelijke, leesbare tekst verschijnt alleen wanneer die in de invoerprompt wordt meegegeven
Duur Ondersteunt enkele minuten continue interactie, geen urenlang gebruik

Beschikbaarheid

Genie 3 is momenteel een beperkte onderzoekspreview.

Google DeepMind geeft vroege toegang aan een kleine groep academici en makers. Deze aanpak stelt hen in staat om:

  • Cruciale feedback te verzamelen
  • Interdisciplinaire perspectieven op deze nieuwe grens te ontwikkelen
  • Inzicht op te bouwen in risico’s en passende mitigerende maatregelen

Er is momenteel geen openbare wachtlijst of toegangspunt. De focus ligt op verantwoorde ontwikkeling vóór een bredere release.


Wat volgt?

Google DeepMind ziet Genie 3 als een belangrijk moment waarop wereldmodellen zowel AI-onderzoek als generatieve media beginnen te beïnvloeden. Ze verkennen:

  • Onderwijs en training: studenten helpen leren en experts ervaring laten opdoen
  • Agenttraining: enorme ruimtes bieden om robots en autonome systemen te trainen
  • Agentevaluatie: prestaties en zwakke punten van agents onderzoeken
  • Extra toegang voor testers: Genie 3 in de toekomst beschikbaar maken voor meer gebruikers

Het grotere plaatje

Genie 3 staat voor een verschuiving in hoe we over door AI gegenereerde content denken. We gaan van:

  • Statische clips → Interactieve omgevingen
  • Vaste prompts → Realtime-besturing
  • Video’s kijken → Werelden verkennen

Voorlopig blijft Genie 3 een onderzoekstool. Maar het wijst naar een toekomst waarin AI niet alleen content genereert om te consumeren, maar werelden om te verkennen.


Op zoek naar een alternatief?

Door de beperkte toegang tot Genie 3 kunnen de meeste gebruikers het vandaag niet uitproberen. Als je nu realtime-wereldgeneratie wilt ervaren, biedt PixVerse R1 een openbaar toegankelijk alternatief:

  • Realtime-generatie tot 1080p
  • Oneindige streamingcapaciteit
  • Gesynchroniseerde audiogeneratie
  • Publieke toegang wordt momenteel uitgebreid

Lees meer in onze vergelijking van Genie 3 en PixVerse R1 of probeer het op realtime.pixverse.ai.