Роботы обнаруживают, как двигаются тяжелые двери шкафов, выдвигая отдельные ящики в умных домах
Мобильные роботы должны открывать двери и ящики, однако их карты сцен фиксируют, что представляет собой каждый объект и переместился ли он, а не как он отреагирует на тягу. В этой статье предлагается PhysVLMM, метод, который поддерживает физическую уверенность для каждой четко сформулированной части карты зрения-языка-движения и отвечает на запросы планировщика об этом с помощью двух алгоритмов: обновления карты и запроса. Наблюдение за движением детали, очевидно, не может определить ее динамику, а измеренное натяжение идентифицирует только вытянутую часть, с точностью до одного направления. Таким образом, PhysVLMM (i) сохраняет это направление как апостериорную, а не точечную оценку, (ii) передает свидетельства каждого притяжения в закрытой форме нетронутым похожим частям карты и (iii) отвечает, будет ли действие успешным при установленном риске или воздержится. На реальных дверях и ящиках в 18 домах он определяет тип соединения в 86% удерживаемого вытягивания (48% для изученного метода единого обзора) и прогнозирует реакцию на вытягивание с помощью 41% с меньшей ошибкой, чем дифференцируемое моделирование (CRPS 0,323 против 0,544), что на четыре порядка быстрее (13 мс против 230 с в каждом случае). Апостериорная версия снижает ошибку конечного положения с 0,460 до 0,270, совместное использование снижает ошибку силы нетронутых частей с 56% до 42%, и при каждом заявленном риске от 0,02 до 0,30 ложнобезопасные ответы остаются в пределах этого значения. Объединение всех измеренных частей дома работает так же, как и группы двойников, а более простые варианты, по крайней мере, также позволяют предсказать, где остановится вытянутая часть.
## В чем суть открытия Если наблюдение за открытой дверью ничего не говорит роботу о ее трении, как можно, выдвинув один ящик, предсказать усилия? ## Как это устроено: принцип работы В этой статье предлагается PhysVLMM, метод, который поддерживает физическую уверенность для каждой четко сформулированной части карты зрения-языка-движения и отвечает на запросы планировщика об этом с помощью двух алгоритмов: обновления карты и запроса. Наблюдение за движением детали, очевидно, не может определить ее динамику, а измеренное натяжение идентифицирует только вытянутую часть, с точностью до одного направления. ## Что это меняет на практике Позволяет домашним роботам-помощникам и складским мобильным манипуляторам надежно открывать незнакомые шкафы, холодильники и ящики, не останавливаясь, не повреждая мебель и не прибегая к медленным циклам физического моделирования. ## Границы метода и риски Предполагает жесткие одноосные соединения (вращающиеся или призматические), исключая многошарнирные, защелкивающиеся или гибкие объекты; обнаружение столкновений в настоящее время демонстрирует ложные тревоги и пропущенные обнаружения в сложных помехах в реальном мире. ## Результаты и доказательства - **Комплексный скор значимости:** 9.6 / 10.0 - **Уровень доказательности:** Теоретическое обоснование