Показывает, что преимущества самовосстановления роботов достигаются за счет статического руководства, а не анализа следов неисправностей
Агенты «код как политика» часто используют обратную связь по выполнению для повторения неудачных программ. Дополнительная выборка и руководство по выполнению задач также могут улучшить успех, оставляя неясным вклад обратной связи по конкретному сбою. Мы изучаем этот вопрос, моделируя манипуляции с роботами. Фиксированный поиск выбирает шаблоны отзывов с использованием меток ошибок и варианта API. Модель замороженного кода генерирует новую программу после каждого сброса сцены. При тех же 252 первоначальных сбоях Qwen2.5-Coder-7B восстанавливает 85.3% за пять повторных попыток по сравнению с 68.3% для повторной выборки с тем же ограничением повторных попыток. Преимущество сохраняется при фиксированном общем бюджете токенов. Обратная связь от других эпизодов и руководство по фиксированным задачам дают аналогичные оценки точек восстановления, при этом не обнаружено никакой выгоды от соответствия метке грубого сбоя. В отдельном исследовании фиксированная управляемая подсказка, использованная с первой попытки, достигла наблюдаемого общего успеха, аналогичного обратной связи на основе шаблона. Обратная связь на основе шаблона также снижает эффективность восстановления при выполнении задачи по вставке гайки, требующей захвата обода, что соответствует несовместимой инструкции захвата по центру. Оценки самостоятельного ремонта робота должны включать в себя повторную выборку, несогласованную обратную связь и краткое, совместимое с задачами статическое руководство в качестве базовых показателей.
## В чем суть открытия Роботизированные агенты ИИ, похоже, учатся на своих ошибках во время повторных попыток, но исследователи обнаружили, что простое предоставление фиксированных инструкций с самого начала работает так же хорошо, как и анализ причин сбоя робота. ## Как это устроено: принцип работы Авторы протестировали роботов-агентов, генерирующих код, при моделировании задач манипуляции, используя парный сброс сцен и стандартизированные запросы на повторную попытку. Систематически заменяя целевую обратную связь о неудачах несовпадающей обратной связью из других эпизодов или шаблонов фиксированных задач, они изолировали влияние адаптивной диагностики по сравнению с простой повторной выборкой. Эксперименты показали, что многократно используемые инструкции задач и дополнительные шаги выборки способствуют успеху повторных попыток, а не динамическому анализу неудач. ## Что это меняет на практике Инженеры, создающие встроенных агентов ИИ, могут исключить сложные и дорогостоящие многоэтапные циклы критики и механизмы саморефлексии LLM. Предоставление статических, высокооптимизированных инструкций по задачам заранее обеспечивает равные или более высокие показатели успеха, одновременно сокращая потребление токенов и задержку выполнения. ## Границы метода и риски Исследование ограничивается моделированием настольных манипуляций с представлениями привилегированных состояний, API-интерфейсами управления положением и грубыми диагностическими метками. Он не оценивает восстановление физических ошибок из нарушенных состояний в середине выполнения, конвейеров визуальной обратной связи или сложных многоэтапных задач рассуждения. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** conditional recovery@5 (%), overall success@6 (%), tokens per solved episode - **Размер выборки / валидация:** N = 252 held-out initial failures across 159 scene configurations; 700 fresh scenes for end-to-end evaluation; 354 failures across 7 generalization settings - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)