Эволюционная обвязка кода наделяет роботов постоянной памятью и адаптирует замороженные политики
Недавняя работа показывает, что замороженная политика робота работает гораздо лучше внутри системы агента, где управляющий код решает, когда запрашивать политику, обращаться к инструментам машинного зрения или напрямую управлять рукой. Однако сегодня эти ремни безопасности собираются вручную и перепроектируются для каждого нового робота или теста. Мы показываем, что проектирование жгутов можно автоматизировать, предлагая надежную альтернативу точной настройке новой установки. В RoboArchitect модель кодирования наблюдает за развертыванием робота, диагностирует сбои и итеративно пересматривает систему с учетом замороженной политики. Ремешок развивается на множестве эпизодов для его оптимизации и оценивается на пройденных сценах и заданиях. Без обновления весов моделей RoboArchitect повышает средний успех с 9.7% до 43.3% в невидимых сценах (4.5x) и с 12.7% до 40.2% в невидимых задачах (3.2x) по множеству тестов и политик. Выигрыш будет наибольшим там, где контрольный показатель далек от данных обучения политики: в результате политики общего назначения развитая система дает специалиста, который часто превосходит даже точно настроенную версию. Интуитивные стратегии управления разрабатываются автоматически, например, подъем застрявшей руки или вытягивание горизонтально, когда препятствие преграждает путь сверху. Упряжь также развивает собственную постоянную память, перенося приобретенный опыт, например, эффективную глубину понимания, в последующие решения. Эти результаты показывают, что существенный запас возможностей для роботизированных манипуляций заключается в использовании агента, а его конструкция может быть эффективно автоматизирована и оптимизирована без обновления веса.
## В чем суть открытия Вместо переобучения сложных нейронных сетей, когда робот не справляется с новой задачей, ROBOARCHITECT использует кодирующий ИИ для автоматического написания, отладки и обновления оболочки Python вокруг замороженной модели робота, что значительно повышает производительность задачи. ## Как это устроено: принцип работы Система запускает политику робота в моделировании, собирает подробные трассировки сбоев и передает их агенту кодирования LLM для диагностики ошибок. Затем модель кодирования итеративно модифицирует систему управления — добавляя геометрические сбросы, резервные визуальные инструменты и постоянную память для разных эпизодов — без изменения каких-либо параметров нейронной сети. За пять итераций система динамически учится, когда запрашивать базовую политику, вызывать модели видения или выполнять прямые совместные траектории. ## Что это меняет на практике Обеспечивает быстрое развертывание готовых базовых политик для роботов на различном промышленном и домашнем оборудовании без дорогостоящего сбора пользовательских наборов данных или трудоемкой настройки нейронной сети. ## Границы метода и риски В настоящее время ограничено пятью итерациями оптимизации в средах моделирования, оставляя неисследованными разрывы между реальными симами и сложными высокочастотными контактными манипуляциями (например, ловкими манипуляциями руками). ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** Success rate (%) on held-out unseen scenes (9.7% -> 43.3%) and unseen tasks (12.7% -> 40.2%); progress score on VLABench - **Размер выборки / валидация:** N = 2,201 procedurally generated training episodes; 2,160 standard benchmark evaluation episodes across 5 benchmarks (LIBERO-Pro-10, RoboCerebra, VLABench, SimplerEnv WidowX, RoboCasa-365) - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)