Интеллектуальный архитектурный поиск сокращает ограничения памяти микроконтроллера, чтобы разблокировать автономное зрение дронов
Плотный оптический поток позволяет небольшим дронам избегать препятствий. Однако лишь немногие сети с плотным оптическим потоком предназначены для микроконтроллеров (MCU) с нейронными ускорителями, чья встроенная SRAM ограничивает входное разрешение. Мы представляем PACE-NAS, структуру поиска нейронной архитектуры от макро к микро, которая отделяет память от задержки: макросхема фиксирует магистраль и ее пиковую SRAM, а микросхема ищет операторы и глубины, чтобы сравнить точность с задержкой, оцененной компилятором. Мы применяем его к EdgeFlowNet на плате Grove Vision AI V2 (Ethos-U55), где профилирование определяет пиковое значение SRAM на выходной головке с полным разрешением. Замена транспонированных сверток на билинейную повышающую дискретизацию и свертки снижает пиковую SRAM на 18%, а два облегченных модуля контекста снижают ошибку конечной точки (EPE), не повышая пик. Все подсети, в которых осуществляется поиск, разделяют этот пик, поэтому для поиска не требуется ограничений памяти. Назовем оптимальные по Парето модели MCUFlowNet; самый быстрый вариант, MCUFlowNet-S, работает с 1.76x быстрее, чем переобученный EdgeFlowNet с более высоким EPE 1.6%, и в моделируемых полетах в лесу со скоростью 2 м/с достигает цели без столкновений в испытаниях 51.5% с 41.8%. PACE-NAS также применяется к семантической сегментации, где искомый вариант PIDNet-S выполняет 1.17x быстрее с одинаковой точностью. Код доступен по адресу https://gitlab.kuleuven.be/emedia-research-lab/esat-stadius/mcuflownet/mcuflownet.
## В чем суть открытия Исследователи создали метод проектирования, который позволяет крошечным микроконтроллерам обрабатывать изображение движения миниатюрных дронов в реальном времени, не исчерпав при этом память. ## Как это устроено: принцип работы Платформа профилирует оборудование для выявления пиковых узких мест в памяти, реструктурирует транспонированные слои свертки с использованием билинейной повышающей дискретизации и добавляет облегченные модули контроля каналов. Затем он ищет глубину и конфигурации оператора в пределах конверта SRAM с фиксированным пиком, чтобы оптимизировать задержку против ошибок. ## Что это меняет на практике Позволяет микроконтроллерам мощностью менее ватт на нанодронах и периферийных устройствах IoT выполнять бортовое объезд плотных препятствий и семантическую сегментацию в течение 1–3 лет. ## Границы метода и риски Требует ручного профилирования платформы на макроуровне перед микропоиском, зависит от фиксированного разрешения выходной головки и по-прежнему имеет более высокую ошибку потока, чем большие модели графических процессоров. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** Endpoint Error (EPE in px), Latency (ms), Peak SRAM (KiB), Obstacle Avoidance Success Rate (%) - **Размер выборки / валидация:** N = 194 simulated flight trials, 800 evaluated NAS subnets, 500 Cityscapes validation images - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)