RealFeedApp beta

PILOT raises task success to 68.8%

The PILOT system uses a video model to generate intermediate subgoals and initializes action search via CEM, achieving 68.8% success on UR5e tasks. The method requires no goal image at test time, relying on 40 demonstrations for fine-tuning.

Field
robotics
What they did
Ученые создали метод PILOT, который использует видео-модель для перевода текстовых инструкций в визуальные промежуточные цели и политику действий для планирования сложных манипуляций роботов.
Why it matters
Это позволяет роботам выполнять задачи с длительным сроком выполнения (до 40 демонстраций) с успехом 68,8% на реальных манипуляторах UR5e, что выше, чем у предыдущих методов (55%).
#robotics#world-model#llm#reinforcement learning#robot manipulation

Read the original →