PILOT повышает успех задач до 68,8%
Система PILOT использует видео-модель для генерации промежуточных целей и инициализирует поиск действий через CEM, достигая 68,8% успеха на задачах с UR5e. Метод не требует изображения конечной цели при тестировании, опираясь на 40 демонстраций для обучения.
- Область
- робототехника
- Что сделали
- Ученые создали метод PILOT, который использует видео-модель для перевода текстовых инструкций в визуальные промежуточные цели и политику действий для планирования сложных манипуляций роботов.
- Зачем это
- Это позволяет роботам выполнять задачи с длительным сроком выполнения (до 40 демонстраций) с успехом 68,8% на реальных манипуляторах UR5e, что выше, чем у предыдущих методов (55%).
#robotics#world-model#llm#reinforcement learning#robot manipulation


