Новый эталонный тест выявил серьезные неисправности в автономных заводских роботах, сталкивающихся с изменчивостью реального мира
Чтобы роботы могли надежно работать в коммерческих и промышленных целях, они должны постоянно выполнять определенные задачи с известными изменениями формы и положения объекта. Мы называем это вариационной автоматизацией (ВА), чтобы отличать эти настройки от фиксированной автоматизации. Вдохновленные недавними статьями по агентной робототехнике, в которых предварительно обученные агенты кодирования LLM и VLM сочетают интерпретируемое программирование роботов с адаптируемостью политик без моделей в открытом мире, мы предлагаем общий набор критериев проектирования эталонных тестов агентной робототехники, который включает в себя доступность, повторяемость, разнообразие, актуальность для агентной робототехники и практических приложений, физическую реализуемость, устойчивость к насыщению тестов и вычислительную эффективность. Мы реализуем эти принципы в шести классах задач манипуляции, охватывающих промышленные, медицинские и инфраструктурные приложения: сортировка инструментов, подвешивание инструментов, зацепление зубчатых колес, упаковка шприцев, вставка кабеля и прокладка кабеля. Мы представляем тест вариационной автоматизации для агентской робототехники (VABAR), открытый, легко воспроизводимый, основанный на моделировании манипулирующий тест для систематической оценки систем агентной робототехники. Полностью построенный на инструментах с открытым исходным кодом, VABAR предлагает детальные реализации с использованием физического движка Newton, стандартизированные варианты задач, уровни сложности, показатели успеха и библиотеку из 33 обобщаемых навыков с программными справочными решениями, созданными людьми. Мы проводим первоначальные базовые оценки, используя открытые агентские средства манипуляции, Graph-as-Policy (GaP) и Isaac Lab Arena.
## В чем суть открытия Заводские роботы преуспевают в фиксированном повторении, но терпят неудачу, когда положение объекта меняется. VABAR тестирует роботов-агентов с искусственным интеллектом на реальных промышленных объектах, таких как сортировка беспорядка и прокладка кабелей. ## Как это устроено: принцип работы VABAR формализует вариационную автоматизацию для шести задач манипулирования с контролируемыми уровнями сложности. Он объединяет 33 примитива навыков с мультифизическим моделированием для пошаговой записи следов диагностического выполнения от восприятия до физического контакта. ## Что это меняет на практике Позволяет разработчикам робототехники систематически оценивать и уточнять политику агентного кодирования для коммерческого производства, прокладки кабелей и медицинской упаковки перед физическим развертыванием. ## Границы метода и риски Оценка в настоящее время ограничена средами моделирования, сталкивающимися с пробелами в переходе от сима к реальному, высокой частотой неудач при планировании движения и визуальными окклюзиями в плотном беспорядке. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** Task success rate (%), median cycle time (s), failure mode distribution (% perception, % grasp, % motion) - **Размер выборки / валидация:** N = 30 independently sampled instances per task condition across 6 task classes and 2 difficulty tiers - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)