Команда RoboCat представила удивительного ИИ-агента, который способен обучаться управлению различными роботизированными руками всего на основе 100 демонстраций. Это открытие подчеркивает, что роботы становятся более универсальными помощниками, чем когда-либо прежде.
RoboCat использует архитектуру многомодального моделирования, основанную на модели Gato, что позволяет ему обрабатывать язык, изображения и действия как в симулированной, так и в реальной среде. После первого этапа обучения, робот запускает цикл «самосовершенствования», получая новые задания и создавая собственные тренировочные данные.
С помощью обучающего набора, который включает миллионы траекторий от реальных и симулированных роботов, RoboCat значительно увеличивает свою эффективность, достигая успеха в решении непростых задач, таких как манипуляции с предметами. Его способность к быстрому обучению и самосовершенствованию открывает путь к созданию еще более полезных универсальных роботов в будущем.
*компания Meta Platforms Inc. признана экстремистской организацией, ее деятельность на территории России запрещена