Почему цифровая репетиция обучает роботов надежнее месяцев сбора реальных демонстраций
Обученные стратегии действий записывают навыки манипулирования в вес сети, привязывая полученные знания к распределению, из которого они получены. Контекстное обучение (ICL) позволяет избежать этой связи, но не соответствует обученным политикам, поскольку демонстрация, записанная в другой сцене, не несет обратной связи от мира, с которым в данный момент сталкивается робот. Мы наблюдаем, что то, что агент изучает в контексте, является семантическим, записывая шаги задачи и роли объектов, а не внешний вид, поэтому опыт, накопленный в одном мире, передается в другой. Основываясь на этом понимании, мы предлагаем World In-Context Learning (WICL), парадигму, в которой замороженная модель начинается с демонстрации, репетирует задачу в мире, таком как симулятор, и записывает обратную связь в ее контекст, а не в ее веса. Мы создаем RoboScript, модульную инфраструктуру, реализующую WICL для агентских манипуляций. Из одной демонстрации RoboScript изучает каждую задачу путем повторения в симуляции, замораживает полученные знания в памяти задач и развертывает замороженную память в новых сценах с изоляцией данных, которая гарантирует, что все входные данные развертывания доступны на реальном роботе. Во всех 50 задачах RoboTwin 2.0 RoboScript достигает среднего успеха 83.4% в чистых и рандомизированных настройках с одной демонстрацией для каждой задачи и без обновлений градиента, что превышает политику самых сильных обученных действий более чем на 20 баллов. Метод обобщает визуальные распределения, улучшается за счет отражения, масштабируется с базовой моделью и переносится на физического робота с двумя руками посредством адаптации памяти между воплощениями. Имея мир в цикле, робот может изучить задачу манипулирования в ее контексте, а также в своих весах. Весь код доступен по адресу https://github.com/ArcheOne-AI/RoboScript.
## В чем суть открытия Себе, что вы мысленно тренируете танцевальное движение в тихой комнате: как только вы усвоите хореографию и роли объектов, вы сможете плавно выполнять его при ярком свете сцены, не нуждаясь в том, чтобы кто-то снова физически толкал ваши конечности. ## Как это устроено: принцип работы RoboScript формализует World In-Context Learning, позволяя замороженной базовой модели проверять одну демонстрацию, репетировать действия в симуляции и переводить физическую обратную связь в структурированные квитанции о действиях. Вместо изменения весов нейронов с помощью обновлений градиента он компилирует проверенные рабочие процессы, относительные возможности объектов и корректирующие уроки в постоянную текстовую память задач, которая управляет развертыванием. ## Что это меняет на практике Позволяет заводским и бытовым роботам быстро осваивать новые ловкие задачи с помощью одного демонстрационного видеоролика посредством симуляции репетиции, исключая опасные реальные пробные запуски и избегая хрупкого коллапса смены доменов, обычного в традиционной политике. ## Границы метода и риски Развертывание остается дорогостоящим и медленным в вычислительном отношении из-за последовательной задержки API (в среднем 54,7 вызовов и 6,4 минуты на эпизод), рефлексия быстро выходит на плато, а текущие навыки не справляются с деформируемыми элементами, такими как кабели или жесткие динамические передачи. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** RoboTwin 2.0 50-task mean success rate (clean vs. randomized setting), retention rate (%) - **Размер выборки / валидация:** N = 50 dual-arm manipulation tasks, 1,000 evaluation episodes per foundation model, physical robot verification across 4 tasks (40 episodes) - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)