Управление мобильным манипулятором всего тела на основе мультимодального взаимодействия в реальном времени

Исследование описывает метод управления мобильным роботом, способным выполнять сложные манипуляции всем телом в реальном времени. Система использует мультимодальные данные для обработки взаимодействий, что критично для автономных мобильных роботов. Это направление объединяет компьютерное зрение, планирование движений и обучение с подкреплением.