ai_frontier · 2026-11-09
Разделение труда в кристалле раскрывает скрытую мощь нейропроцессоров для разреженных вычислений
Нейронные процессоры (NPU) обеспечивают высокую плотность вычислений и энергоэффективность благодаря специализированным матричным механизмам и встроенной памяти, управляемой программным обеспечением. Однако их библиотеки в первую очередь ориентированы на плотные вычисления. Умножение разреженной матрицы с плотной матрицей (SpMM), ключевое ядро в графовой аналитике, разреженных нейронных сетях и научных вычислениях, требует выбора операндов на основе индекса, косвенной адресации, разрозненного доступа к памяти и балансировки нагрузки. Эти требования противоречат фиксированным формам и непрерывным компоновкам, предпочитаемым матричными процессорами NPU. Методы GPU Tensor Core SpMM не могут быть напрямую перенесены в NPU с разделенными векторными и матричными механизмами. Мы представляем AscSpMM, который отделяет нерегулярную подготовку операндов от регулярных вычислений матрицы посредством параметризованного представления Vector-CSR. Векторный механизм декодирует индексы, собирает и реорганизует плотные операнды, а механизм куба выполняет матричные операции умножения-накопления. Кольцевой буфер с двумя слотами обеспечивает асинхронную конвейерную обработку с учетом зависимостей, а повторное использование операндов и адаптируемое к среде выполнения тайлинг уменьшают зависания между ядрами. На Ascend 910B3 AscSpMM достигает среднего геометрического ускорения 2.36x по сравнению с GEMM, 19.92x по сравнению с существующей реализацией SpMM и 5.82x по сравнению с cuSPARSE на A100. Он уменьшает объем памяти матричного ввода и пиковую нагрузку HBM на 48.24% и 22.98% в среднем, оставаясь при этом конкурентоспособным по сравнению со специализированными ядрами GPU Tensor Core SpMM. Код доступен по адресу https://github.com/LfLab-AI/Ascend-NPU-SpMM.
## В чем суть открытия
Склад, где ловкий вилочный погрузчик складывает разрозненные пакеты в аккуратные стандартизированные поддоны, чтобы сверхмощный кран мог штамповать их непрерывно, не останавливаясь.
## Как это устроено: принцип работы
Платформа разделяет умножение разреженных матриц между отдельными аппаратными механизмами, вводя Vector-CSR для группировки строк в векторные блоки фиксированной высоты с общими индексами столбцов. Выделенные векторные ядра собирают и упаковывают несмежные плотные строки операндов в выровненные ячейки памяти, в то время как механизмы матричных кубов непрерывно выполняют плотные операции умножения-накопления. Асинхронный двухслотовый кольцевой буфер с ранними подтверждениями перекрывает промежуточную обработку данных и выполнение арифметических операций.
## Что это меняет на практике
Позволяет крупномасштабным графовым нейронным сетям, внедрению рекомендаций и моделям преобразованных преобразователей выполняться на корпоративных ускорителях без графических процессоров с удвоенной пропускной способностью и вдвое меньшим объемом матричной памяти.
## Границы метода и риски
Производительность снижается на чрезвычайно разреженных графах с менее чем 10 ненулевыми числами в строке из-за неполного заполнения векторных листов и накладных расходов на глобальную синхронизацию памяти, иногда отставая от механизмов с плотной матрицей при умеренной разреженности 90%.
## Результаты и доказательства
- **Комплексный скор значимости:** 9.5 / 10.0
- **Уровень доказательности:** программный бенчмарк и верификация
- **Бенчмарки и прирост:** Geometric-mean speedup over GEMM, cuSPARSE, and NeutronSparse; peak HBM footprint reduction; end-to-end GCN inference latency
- **Размер выборки / валидация:** N = 48 synthetic controlled configurations (M=N=K from 64 to 16384, sparsity 90% to 99.9%), 14 SuiteSparse and OGB unstructured matrices evaluated across 5 feature widths (70 setups), 5 graph datasets for end-to-end GCN
- **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)
quantum_physics · 2026-11-18
Аннотация: Современная цифровая инфраструктура сталкивается с системным комплексным кризисом по трем фундаментальным векторам: вероятностная ловушка ИИ (стохастические модели с галлюцинациями и катастрофическим потреблением энергии), уязвим
ai_frontier · 2026-11-18
Abstract Background Children with cerebral palsy (CP) exhibit substantially elevated energetic costs of walking, yet the biomechanical origins of this excessive cost remain unclear, limiting the effectiveness of current interventions. Metho
ai_frontier · 2026-11-18
Детекторы Шиллинга для рекомендательных систем почти всегда оцениваются по одному числу — обнаружению AUROC, без учета того, когда ему можно доверять. Мы проверяем обнаружение пространства представления с помощью VEIL (Вариационная оценка п
brain_bci · 2026-11-18
Монреальская когнитивная оценка (MoCA) широко используется в исследованиях болезни Паркинсона (БП) для измерения когнитивных функций, но опубликованные пороговые значения для легких когнитивных нарушений (PD-MCI) и деменции (PDD) различаютс
brain_bci · 2026-11-18
Компьютеризированная когнитивная тренировка (CCT) направлена на смягчение снижения когнитивных функций при субъективном снижении когнитивных функций (SCD) и легких когнитивных нарушениях (MCI). Однако соблюдение требований и долгосрочное
brain_bci · 2026-11-18
Изучить этническое неравенство в результатах найма и представительстве рабочей силы среди медсестер и акушерок в разных диапазонах оплаты, а также оценить, могут ли регулярно собираемые административные данные генерировать воспроизводимые п
biomedicine_health · 2026-11-18
Это обновление ранее опубликованного обзора. Женщины с бесплодием могут использовать дополнительные методы лечения для улучшения репродуктивных результатов. Мио-инозитол и D-хиро-инозитол — это широко доступные пищевые добавки, которые обыч
biomedicine_health · 2026-11-18
Имеглимин — противодиабетический препарат на основе метформина, который улучшает гликемию за счет оптимизации функции митохондрий. Данные свидетельствуют о том, что он повышает эффективность митохондрий и сохраняет массу β-клеток поджелудоч
brain_bci · 2026-11-18
Несмотря на наблюдаемые преимущества современных методов лечения, у людей, живущих со спинальной мышечной атрофией (СМА), сохраняются некоторые тяжелые симптомы. Усталость постоянно указывается сообществом СМА как главная неудовлетворенная
biomedicine_health · 2026-11-18
In reproductive-aged women with polycystic ovary syndrome, overweight or obesity exacerbates metabolic and reproductive risks; lifestyle interventions and metformin have limited weight-loss effects, and more effective pharmacological weight
biotech_bioengineering · 2026-11-18
Геномный отбор стал мощным инструментом для ускорения генетического улучшения в селекции животных, однако его более широкое применение часто ограничивается высокими затратами на генотипирование и снижением надежности прогнозирования среди п
biotech_bioengineering · 2026-11-18
Osteoglossidae, одна из самых древних пресноводных рыб, демонстрирующая трансконтинентальную дизъюнкцию, дает важную информацию о ранней эволюции костистых рыб и исторической биогеографии. Используя интегрированные стратегии секвенирования,
biotech_bioengineering · 2026-11-18
Фертильность молока сильно влияет на устойчивость фермы, поскольку молодых коров приходится выращивать в течение многих месяцев, прежде чем они начнут давать молоко. Возраст начала обслуживания (AFS) является ключевым фактором репродуктивно
biomedicine_health · 2026-11-18
Понимание движущих сил, лежащих в основе половых различий в продолжительности жизни, может дать ценную информацию об эволюции продолжительности жизни в целом. Однако сравнительные исследования, выявляющие эти факторы у беспозвоночных, остаю
ai_frontier · 2026-11-18
Травматическая оптическая нейропатия (ТОН) является основной причиной необратимой потери зрения после тупой черепно-мозговой травмы, однако отсутствие клинически значимых моделей на крупных животных, которые точно повторяют человеческий ТОН