Аналоговые чипы видят мир без кадров, но скрывают гигантскую ловушку памяти
Сегментация камеры событий требует постоянного состояния нейронов, несмотря на редкость входных событий, что делает организацию памяти основным ограничением для встроенной реализации. Мы представляем EventSpikeSeg, архитектуру смешанных сигналов, сочетающую резидентную конденсаторную память с общей аналоговой обработкой в 180-нм КМОП GF180MCU. Его импульсный кодер-декодер с 25 популяциями имеет 143 824 синаптических веса, но требует 30 976 000 состояний мембраны с разрешением 440 x 640. Сопоставление определяет хронологические обновления модели с интервалом 5 мс, цифровые службы событий/адресов и банки конденсаторов с 64 состояниями. Характеристика охватывает 22 семейства модулей и 74 рабочие точки, что отличает моделирование транзисторов от оценок, полученных в цифровой библиотеке. Номинальные результаты включают смещенную мощность ядра нейрона 41,711 микроватт, энергию положительного терминала 3,338 пДж для считывания ячейки за 1,4 микросекунды и дрейф выбранного состояния 0,531 мВ в течение 5 мс удержания извлеченной плитки. Ошибки фиксации и связывания сообщаются отдельно. Программная контрольная точка записывает, что 27.976% означает пересечение-объединение в удерживаемом разделении DSEC на шесть классов; это не аппаратная точность. Компоновка компонентов и данные моделирования дают количественную оценку затрат на локальную реализацию и выявляют репликацию хранилища и планирование обслуживания как ограничения масштабирования. Детальное прямое моделирование поведения одного кадра DSEC с полным разрешением, откалиброванное по SPICE, обеспечивает среднее значение пересечения 24.26% по сравнению с 26.22% для соответствующего эталонного образца PyTorch с использованием компактного варианта банка 5 фФ и внешней калибровки счетчика/напряжения. Физическая работа всей сети, энергопотребление системы и устойчивость к несоответствию остаются непроверенными.
## В чем суть открытия Если нейроморфной сети зрения требуется всего 144 тысячи весов, почему для ее построения из аналогового кремния требуется более тридцати миллионов конденсаторов? ## Как это устроено: принцип работы Архитектура отделяет постоянную память от нейронных вычислений, сохраняя электрические заряды внутри микроскопических батарей конденсаторов. Вместо создания миллионов энергоемких физических нейронов небольшая группа общих аналоговых схем быстро перемещается по конденсаторной памяти, выполняя нейронные утечки и всплески. ## Что это меняет на практике Обеспечивает сверхбыструю непрерывную визуальную сегментацию мощностью менее ватта для дронов и автономных транспортных средств, работающих при малой мощности и широком динамическом диапазоне. ## Границы метода и риски Теоретическая площадь компоновки составляет более 4800 мм², требует внешней калибровки напряжения и не требует физической проверки кремниевой ленты. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** Эмпирическое исследование - **Бенчмарки и прирост:** mIOU: 24.26% (калибровка по SPICE) и 26.22% (ссылка на PyTorch) в классе DSEC 6; Пиксельная точность: 61.30% против 64.17%; Мощность ядра PLIF: 41,71 мкВт; Чтение энергии: 3,34 пДж/ячейка - **Размер выборки / валидация:** N = 1 full-resolution (440x640) DSEC driving record (Zurich City 02a, 10 bins of 5 ms), 22 circuit module families, 74 operating points - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)