Искусственный интеллект для создания реалистичных тренировочных сцен для роботов

Искусственный интеллект стремительно развивается, и новые работе MIT и Toyota Research Institute демонстрируют это, устанавливая новые стандарты в обучении роботов. Исследователи представили метод “управляемого создания сцен” (steerable scene generation), который позволяет создавать 3D-окружения, такие как кухни и рестораны, для тренировки роботов. Технология основывается на обработке более 44 миллионов 3D-кадров и обеспечивает физическую реалистичность взаимодействий.

Этот подход использует диффузионную модель, направляя ее на создание реалистичных scenes, избегая распространенных проблем, таких как “пересечение” объектов. В процессе роботы могут взаимодействовать с предметами, что открывает новые возможности для применения в реальных условиях. Чтобы повысить разнообразие сцен, метод включает в себя обучение с подкреплением, что делает процесс создания сцен более гибким и адаптируемым.

Хотя работа ещё находится на стадии концепции, результаты многообещающие и могут значительно облегчить задачу по созданию высококачественных данных для обучения.

*компания Meta Platforms Inc. признана экстремистской организацией, ее деятельность на территории России запрещена