DeepMind heeft een AI-agent onthuld die taken kan uitvoeren in onbekende 3D-games

Google DeepMind heeft een nieuwe agent met de naam SIMA (Scalable Instructable Multiworld Agent) gedemonstreerd die taken in 3D-games kan begrijpen en uitvoeren op basis van instructies in natuurlijke taal.

Dit is wat we weten

De nieuwe ontwikkeling van DeepMind is de eerste die laat zien dat de AI in staat is om opdrachten op te volgen in een breed scala aan spelwerelden en omgevingen waar het nog niet eerder mee te maken heeft gehad. Er werden negen commerciële games gebruikt om SIMA te trainen, waaronder No Man's Sky, Teardown, Valheim en Goat Simulator 3.

Onderzoekers registreerden de toetsenbord- en muisacties van spelers om SIMA te trainen in het waarnemen van instructies in natuurlijke taal en het spelpersonage dienovereenkomstig te besturen. De agent kan taken van verschillende niveaus van complexiteit uitvoeren, van navigatie tot interactie met objecten en de gebruikersinterface.

In tests heeft SIMA laten zien dat het zijn ervaring in bepaalde games effectief kan generaliseren naar andere onbekende omgevingen. De prestaties in onbekende spellen waren bijna gelijk aan die van een agent die specifiek op deze spellen was getraind.

Taalinstructies van de gebruiker zijn echter noodzakelijk om SIMA optimaal te laten presteren. Zonder deze instructies gedroeg de agent zich onsamenhangend en chaotisch.

DeepMind ziet een groot potentieel in het creëren van universele taalgestuurde AI-agenten op basis van SIMA. In de toekomst verwacht het bedrijf systemen te ontwikkelen die veilig een breed scala aan taken kunnen uitvoeren op basis van menselijke instructies in virtuele en echte omgevingen.

Bron: Engadget