Прорыв в вычислениях: умное распределение данных ускорило работу процессоров на 81%
Разреженное общее умножение матрицы на матрицу (SpGEMM) — это ключевое ядро в графовой аналитике, реляционных запросах и машинном обучении. Тем не менее, его производительность остается серьезной проблемой из-за присущей ему разреженности и, что более важно, распространенных шаблонов перекосов, часто встречающихся в реальных рабочих нагрузках. В данной статье исследуется эта проблема и демонстрируется, что несбалансированное распределение рабочей нагрузки является основным виновником, снижающим производительность по двум одновременно существующим коренным причинам: во-первых, многомерный перекос, когда дисбаланс между стоимостью вычислений, плотностью вывода и локальностью данных не может быть учтен какой-либо одной метрикой балансировки; и, во-вторых, конфликты за кэш, когда плотные подструктуры вызывают серьезные помехи внутри кристалла. С этой целью мы предлагаем адаптивное планирование кусочков (AMS), динамическую структуру планирования, которая отделяет асимметричные измерения с помощью кусочков фиксированного размера и объединяет балансировку нагрузки с учетом конфликтов (CALB) и активатор одновременной многопоточности с учетом данных (SMTact) для уменьшения конфликтов на уровне кэша, а также механизм гибридного накопления (HYB), который адаптивно выбирает лучший аккумулятор для каждого кусочка. Оценки возведения в квадрат матриц, реляционных запросов, анализа графов и других ядер с разреженной матрицей показывают, что AMS значительно превосходит современные методы при работе с асимметричными рабочими нагрузками, сохраняя при этом сопоставимую производительность на неасимметричных нагрузках. Эти преимущества, наряду с улучшенным использованием полосы пропускания, остаются действительными для широкого спектра рабочих нагрузок и аппаратных систем.
## В чем суть открытия Почему расширения памяти CXL с высокой пропускной способностью не работают при перекошенных рабочих нагрузках SpGEMM и как планирование с учетом? ## Как это устроено: принцип работы Тем не менее, его производительность остается серьезной проблемой из-за присущей ему разреженности и, что более важно, распространенных шаблонов перекосов, часто встречающихся в реальных рабочих нагрузках. В данной статье исследуется эта проблема и демонстрируется, что несбалансированное распределение рабочей нагрузки является основным виновником, снижающим производительность по двум одновременно существующим коренным причинам: во-первых, многомерный перекос, когда дисбаланс между стоимостью вычислений, плотностью вывода и локальностью данных не может быть учтен какой-либо одной метрикой балансировки; и, во-вторых, конфликты за кэш, когда плотные подструктуры вызывают серьезные помехи внутри кристалла. ## Что это меняет на практике Ускоряет анализ графов, реляционные агрегатные запросы соединения и разреженные конвейеры линейной алгебры, обеспечивая до 3.83x более быстрое аналитическое выполнение на гетерогенных архитектурах памяти ЦП и CXL в течение 1–3 лет. ## Границы метода и риски Вызывает незначительные накладные расходы на предварительную обработку сортировки чрезвычайно разреженных, неперекошенных матриц и требует символьной фазы для оценки выходных ненулевых структур для каждой строки. ## Результаты и доказательства - **Комплексный скор значимости:** 9.6 / 10.0 - **Уровень доказательности:** Теоретическое обоснование - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)