computing_infrastructure · 2026-11-12
Почему удаление девяноста процентов весов в нейросетях годами замедляло чипы вместо ускорения
Глубокие нейронные сети для обработки изображений все чаще развертываются на периферийных устройствах с ограниченными ресурсами, таких как дроны, медицинские системы и смартфоны, где ограниченные вычислительные ресурсы и пропускная способность памяти создают серьезные проблемы для эффективного вывода. Обрезка во время обучения часто приводит к очень разреженным сверточным ядрам, что дает возможность значительно снизить требования к вычислениям и памяти. Однако эффективное использование этой разреженности во время выполнения остается сложной задачей из-за нерегулярных шаблонов доступа к памяти и дисбаланса рабочей нагрузки между элементами обработки. В этой работе мы исследуем стандартную свертку с разреженными весами и анализируем ее характеристики производительности с помощью анализа линии крыши, показывая, что разреженная свертка 3 x 3 достигает арифметической интенсивности примерно 10 флоп/байт по сравнению примерно с 96 флоп/байт для ее плотного аналога. Мы предлагаем методы эффективной разреженной свертки при высокой разреженности. Предварительные результаты показывают, что наш подход обеспечивает ускорение до 1.65x по сравнению с плотной сверткой на NVIDIA A100 и до 1.52x на NVIDIA Jetson Nano (Tegra X1), что мотивирует дальнейшее исследование прямой свертки как практического пути к эффективному разреженному выводу на современных ускорителях/периферийных устройствах.
## В чем суть открытия
Пропуск 95% пустых слов в книге замедляет работу, если вы ищете каждый номер страницы индивидуально, но объединение каждого слова непосредственно с его координатами делает чтение почти мгновенным.
## Как это устроено: принцип работы
Ядро сочетает в себе совместную загрузку фрагментов общей памяти с пользовательским 32-битным упакованным представлением веса. Каждое ненулевое значение напрямую объединяется с его канальными и пространственными координатами, позволяя потоку получать все необходимые метаданные в одной объединенной транзакции памяти.
## Результаты и доказательства
- **Комплексный скор значимости:** 9.5 / 10.0
- **Уровень доказательности:** code_benchmark
- **Бенчмарки и прирост:** Latency (ms), Speedup relative to dense PyTorch baseline, Maximum Absolute Error, Arithmetic Intensity (FLOP/byte)
- **Размер выборки / валидация:** N = 10 runs of 40 convolution iterations across 9 sparsity levels (90% to 98%) on NVIDIA A100 and Jetson Nano
- **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)
## Что это меняет на практике
Обеспечивает немедленное сокращение задержки во время выполнения сокращенных сверточных нейронных сетей в робототехнике, автономных дронах и встроенных периферийных устройствах без необходимости использования специального разреженного оборудования.
## Границы метода и риски
Оценивается строго на свертках 3x3 с единичным шагом, дает незначительный выигрыш, когда входные каналы равны одному, и полагается на равномерную разреженность по каналам для предотвращения деформационного расхождения.
quantum_physics · 2026-11-18
Аннотация: Современная цифровая инфраструктура сталкивается с системным комплексным кризисом по трем фундаментальным векторам: вероятностная ловушка ИИ (стохастические модели с галлюцинациями и катастрофическим потреблением энергии), уязвим
ai_frontier · 2026-11-18
Abstract Background Children with cerebral palsy (CP) exhibit substantially elevated energetic costs of walking, yet the biomechanical origins of this excessive cost remain unclear, limiting the effectiveness of current interventions. Metho
ai_frontier · 2026-11-18
Детекторы Шиллинга для рекомендательных систем почти всегда оцениваются по одному числу — обнаружению AUROC, без учета того, когда ему можно доверять. Мы проверяем обнаружение пространства представления с помощью VEIL (Вариационная оценка п
brain_bci · 2026-11-18
Монреальская когнитивная оценка (MoCA) широко используется в исследованиях болезни Паркинсона (БП) для измерения когнитивных функций, но опубликованные пороговые значения для легких когнитивных нарушений (PD-MCI) и деменции (PDD) различаютс
brain_bci · 2026-11-18
Компьютеризированная когнитивная тренировка (CCT) направлена на смягчение снижения когнитивных функций при субъективном снижении когнитивных функций (SCD) и легких когнитивных нарушениях (MCI). Однако соблюдение требований и долгосрочное
brain_bci · 2026-11-18
Изучить этническое неравенство в результатах найма и представительстве рабочей силы среди медсестер и акушерок в разных диапазонах оплаты, а также оценить, могут ли регулярно собираемые административные данные генерировать воспроизводимые п
biomedicine_health · 2026-11-18
Это обновление ранее опубликованного обзора. Женщины с бесплодием могут использовать дополнительные методы лечения для улучшения репродуктивных результатов. Мио-инозитол и D-хиро-инозитол — это широко доступные пищевые добавки, которые обыч
biomedicine_health · 2026-11-18
Имеглимин — противодиабетический препарат на основе метформина, который улучшает гликемию за счет оптимизации функции митохондрий. Данные свидетельствуют о том, что он повышает эффективность митохондрий и сохраняет массу β-клеток поджелудоч
brain_bci · 2026-11-18
Несмотря на наблюдаемые преимущества современных методов лечения, у людей, живущих со спинальной мышечной атрофией (СМА), сохраняются некоторые тяжелые симптомы. Усталость постоянно указывается сообществом СМА как главная неудовлетворенная
biomedicine_health · 2026-11-18
In reproductive-aged women with polycystic ovary syndrome, overweight or obesity exacerbates metabolic and reproductive risks; lifestyle interventions and metformin have limited weight-loss effects, and more effective pharmacological weight
biotech_bioengineering · 2026-11-18
Геномный отбор стал мощным инструментом для ускорения генетического улучшения в селекции животных, однако его более широкое применение часто ограничивается высокими затратами на генотипирование и снижением надежности прогнозирования среди п
biotech_bioengineering · 2026-11-18
Osteoglossidae, одна из самых древних пресноводных рыб, демонстрирующая трансконтинентальную дизъюнкцию, дает важную информацию о ранней эволюции костистых рыб и исторической биогеографии. Используя интегрированные стратегии секвенирования,
biotech_bioengineering · 2026-11-18
Фертильность молока сильно влияет на устойчивость фермы, поскольку молодых коров приходится выращивать в течение многих месяцев, прежде чем они начнут давать молоко. Возраст начала обслуживания (AFS) является ключевым фактором репродуктивно
biomedicine_health · 2026-11-18
Понимание движущих сил, лежащих в основе половых различий в продолжительности жизни, может дать ценную информацию об эволюции продолжительности жизни в целом. Однако сравнительные исследования, выявляющие эти факторы у беспозвоночных, остаю
ai_frontier · 2026-11-18
Травматическая оптическая нейропатия (ТОН) является основной причиной необратимой потери зрения после тупой черепно-мозговой травмы, однако отсутствие клинически значимых моделей на крупных животных, которые точно повторяют человеческий ТОН