Недавно команда Google DeepMind представила SIMA (Scalable Instructable Multiworld Agent) — нового AI-агента, способного выполнять задачи в различных игровых мирах, следуя естественным языковым инструкциям. Это исследование подчеркивает, как видео игры служат базой для обучения ИИ, предоставляя сложные и динамичные среды.
SIMA способен взаимодействовать с девятью различными играми, включая популярные тайтлы, такие как No Man’s Sky и Teardown. Агент обучался на множестве ситуаций и сценариев, что позволяет ему понимать и выполнять команды пользователей, как человек. Это не просто про высокие баллы в играх, а про создание более полезных AI-агентов, которые могут работать в реальном мире.
Основываясь на предварительно обученных моделях и новой архитектуре, SIMA способен выполнять задачи в 3D средах с лишь двумя источниками ввода: изображениями и командами на естественном языке. Это открывает путь к более универсальным и адаптивным AI-системам.
Исследование показывает, что агенты, обученные на множестве игр, превосходят специализированные системы, что подтверждает потенциал SIMA в широком круге применения.
*компания Meta Platforms Inc. признана экстремистской организацией, ее деятельность на территории России запрещена