Адаптация искусственного интеллекта без обновления устраняет искажения 3D-видения без доступа к весам моделей
Надежное распознавание 3D-облака точек имеет решающее значение для робототехники, картографии и городского зондирования, однако классификаторы облаков точек часто страдают от падения производительности при смене доменов, вызванной изменениями датчиков, изменениями окружающей среды и артефактами сбора данных. Многие существующие методы адаптации трудно реализовать на практике, поскольку они требуют доступа к исходным данным или внутренним параметрам исходной модели, который может быть ограничен ограничениями конфиденциальности, лицензирования или безопасности. Мы представляем 3D-BBDA, структуру адаптации домена черного ящика без обратного распространения ошибки, которая адаптирует обученный на источнике предиктор к немаркированным целевым данным, используя только выходные данные черного ящика. Наш метод выполняет выравнивание на основе прототипа, управляемое псевдометками, и использует модуль взвешенного прогнозирования для объединения логитов источника с логитами выравнивания, снижая чувствительность к зашумленным псевдометкам. Чтобы стабилизировать память прототипа, когда покрытие псевдометок неполное, мы создаем прототип с возмущением по Гауссу на основе немаркированных целевых прогнозов и используем его в качестве запасного варианта для отсутствующих или ненадежных прототипов классов во время выравнивания. Эксперименты с четырьмя поврежденными 3D-тестами демонстрируют стабильные улучшения по сравнению с сильными базовыми показателями. В ModelNet-40C 3D-BBDA достигает средних ошибок 32.08% (PointNet) и 29.62% (GDANet), превосходя по производительности только исходный код (35.88% / 34.03%) и BFTT3D (33.78% / 32.36%). 3D-BBDA требует только одного прямого прохода без каких-либо обновлений градиента, что делает его пригодным для развертывания в режиме реального времени с сохранением конфиденциальности в передаваемых конвейерах 3D-распознавания. Страница проекта доступна по адресу https://visdomlab.github.io/3D_BBDA.
## В чем суть открытия Новая структура позволяет замороженным 3D-моделям распознавания на роботах адаптироваться к сильному шуму и искажениям датчиков, используя только внешние выходные данные, пропуская повторные тренировки и исходные данные. ## Как это устроено: принцип работы 3D-BBDA извлекает геометрические элементы с использованием замороженной непараметрической сети и группирует их в прототипы классов на основе псевдометок черного ящика из исходной модели. Чтобы обрабатывать отсутствующие классы при сканировании с шумом, прототип с возмущением по Гауссу предварительно дополняет недостающие слоты памяти. Проекция общего подпространства выравнивает целевые объекты с этими прототипами, а модуль взвешенного прогнозирования объединяет прогнозы источника и выравнивания без обратного распространения ошибки. ## Что это меняет на практике Обеспечивает в режиме реального времени трехмерное восприятие с сохранением конфиденциальности на периферийных платформах с низким энергопотреблением, таких как автономные мобильные роботы, картографические дроны LiDAR и беспилотные транспортные средства, работающие в суровых условиях, в течение 1–3 лет. ## Границы метода и риски Требуется согласование классов с закрытым набором между исходным и целевым доменами, а также проблемы, если псевдометки страдают от катастрофического краха доверия из-за сильного шума. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** Mean Classification Error (%), Expected Calibration Error (ECE), Inference Time (ms) - **Размер выборки / валидация:** N = ModelNet-40C (2,468 test samples), ScanObjectNN-C (581 test samples), ShapeNet-C (51,127 shapes across 55 categories), SydneyUrban-C (631 real LiDAR objects across 14 classes) - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)