Почему роботы роняют предметы при передаче человеку и как секундная пауза спасает захват
Совместная игра с самим собой может научить гуманоида получать объект без каких-либо человеческих данных, но партнер, которого он встречает после обучения, никогда не является тем, с кем он тренировался; мы показываем, что плавная политика передачи управления в режиме самостоятельной игры нарушает работу с незнакомыми партнерами, определяем основную причину и устраняем ее. При передаче посылки между Unitree G1 и обученным дающим, основанным на физике, оба обучены путем поочередного самовоспроизведения PPO, получатель завершает передачи 95% и 90% со своим собственным партнером (два обучающих начальных числа), но только 31% со сценарными партнерами, с которыми он никогда не встречался. Парные вмешательства изолируют причину: при разделении вознаграждения обученный дающий всегда начинает свое предложение сразу, поэтому получатель запоминает одну встречу, а задержка своего партнера на одну секунду снижает успех с 95% до 6% (от 87% до 34% во втором начальном коде). Мы вводим скрытую рандомизацию запуска-задержки (HSD), однострочное правило для изученного партнера, которое получатель никогда не наблюдает. После 300 дальнейших обновлений успех с невидимыми партнерами по сценарию возрастает с 31% до 80% в обоих начальных числах по сравнению с 35--41% для элемента управления, соответствующего бюджету. Выигрыш сохраняется при новом исходном сценарии, при одиннадцати отложенных партнерских условиях и при партнерах, которые начинаются позже, чем любая задержка в обучении; он сокращает контакт с высокой силой в три-пять раз и не требует переподготовки партнера.
## В чем суть открытия Если два робота вместе достигают идеальной передачи объекта без каких-либо человеческих данных, почему всего лишь секундная пауза незнакомца приводит к полному сбою системы? ## Как это устроено: принцип работы Поскольку совместно обученный дающий и получатель разделяют награду, дающий всегда начинает действовать как можно раньше, обучая робота запоминать фиксированное время встречи, а не сенсорные сигналы. Введение скрытой рандомизации старта и задержки приводит к тому, что контроллер дающей руки должен пройти ненаблюдаемый интервал отдыха, прежде чем он сможет продлиться. Это заставляет рекуррентную политику получателя динамически отслеживать входящую траекторию вместо того, чтобы сжимать пальцы по жесткому графику. ## Что это меняет на практике Позволяет гуманоидам заводского и домашнего обслуживания безопасно получать объекты от различных, непредсказуемых пользователей-людей, не собирая дорогостоящие наборы демонстрационных данных для нескольких субъектов. ## Границы метода и риски Оценивается исключительно в моделировании со структурированными наблюдениями за состоянием, а не с визуальным зрением, и схлопывается до успеха ниже 5% при столкновении с партнерами, которые убирают объекты при преждевременном выдергивании. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** Эмпирическое исследование - **Бенчмарки и прирост:** Поддерживаемая скорость передачи (%), пиковая сила контакта робота с партнером (Н), расстояние проскальзывания посылки (см) - **Размер выборки / валидация:** N = 200 fixed test scenarios across two training seeds and 11 held-out partner conditions - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)