DeepMind представила агента ИИ, способного выполнять задачи в незнакомых 3D-играх

Автор: Богдан Каминский, 14 марта 2024, 18:01

Google DeepMind

Компания Google DeepMind продемонстрировала нового агента искусственного интеллекта под названием SIMA (Scalable Instructable Multiworld Agent), который может понимать и выполнять задачи в 3D-играх на основе инструкций на естественном языке.

Что известно

Новая разработка DeepMind впервые показала способность ИИ следовать командам в широком спектре игровых миров и окружений, с которыми он ранее не сталкивался. Для обучения SIMA использовались девять коммерческих игр, включая No Man's Sky, Teardown, Valheim и Goat Simulator 3.

Исследователи записывали действия игроков с клавиатурой и мышью, чтобы обучить SIMA воспринимать указания на естественном языке и соответствующим образом управлять игровым персонажем. Агент может выполнять задачи разного уровня сложности — от навигации до взаимодействия с объектами и пользовательским интерфейсом.


Процесс обучения ИИ-модели SIMA

В тестах SIMA продемонстрировала способность эффективно обобщать опыт, полученный в одних играх, на другие незнакомые среды. Ее результаты в неизвестных играх были почти такими же, как у агента, обученного специально на этих играх.


Результаты тестирования ИИ-модели SIMA

Однако для оптимальной работы SIMA необходимы языковые инструкции от пользователя. Без них агент действовал бессвязно и хаотично.

DeepMind видит большой потенциал в создании универсальных управляемых языком агентов ИИ на основе SIMA. В перспективе компания рассчитывает разработать системы, способные безопасно выполнять широкий спектр задач по указаниям человека в виртуальных и реальных средах.

Источник: Engadget