Как одновременная загрузка вычислительных ядер видеокарт искажает моделирование гидродинамики
Для научных вычислений часто требуется арифметика FP64, хотя производительность FP64 ограничена на графических процессорах NVIDIA. Эмуляция двойного числа с плавающей запятой (DF), которая представляет значение с использованием двух значений FP32 с примерно 48 битами мантиссы, превосходит исходный FP64, где единицы FP64 ограничены. С другой стороны, стратегии смешанной точности перекладывают на FP32 операции, которые не определяют точность. В обоих подходах собственные блоки FP64 остаются бездействующими во время выполнения инструкций FP32. Мы исследовали, можно ли восстановить этот неиспользуемый ресурс на A100, GH200, GB200 и RTX PRO 6000 Blackwell Max-Q. Микротест показывает, что сорезидентные ядра FP32 и собственные FP64 превышают пропускную способность одного только более быстрого ядра на A100, но не на GH200 и GB200; на RTX 6000 Blackwell они делают это с FFMA, но с эмуляцией DF только тогда, когда плотность ядра DF снижается. Затем мы проверили, переносится ли этот выигрыш на вычисление реконструкции WENO-Z с нелинейными весами в FP32 и полиномами-кандидатами в собственном FP64 (W32P64). Мы наблюдаем существенное совпадение на A100, тогда как GH200, GB200 и RTX 6000 Blackwell показывают незначительное совпадение. Важно отметить, что самое быстрое размещение не всегда сохраняет расчетную точность WENO-Z: для одномерной задачи энтропийной волны W32P64 не может достичь расчетного порядка точности для WENO7 и WENO9. Напротив, эмуляция DF всей реконструкции близка к ней на сетках, протестированных для WENO5, WENO7 и WENO9, обеспечивая при этом ускорение $2.51-3.94 \times$ по сравнению с FP64 на RTX 6000 Blackwell. Для WENO5 в двумерной вихревой задаче Эйлера ошибка W32P64 в $n=256$ равна $1.26 \times$, что соответствует FP64, и составляет 1/104 от ошибки полной реконструкции FP32.
## В чем суть открытия Многополосное шоссе, на котором спортивные автомобили (быстрая математика с низкой точностью) и тяжелые грузовики (медленная математика с высокой точностью) пытаются делить полосы движения. Если спортивные автомобили блокируют каждый входной цикл, грузовики застревают, а точные повороты вызывают математический занос. ## Как это устроено: принцип работы Авторы проверяют, могут ли физически отдельные процессоры FP32 и FP64 на графических процессорах NVIDIA (от Ampere до Blackwell) одновременно выполнять инструкции в одном вычислительном ядре. Оценивая решатели WENO-Z с захватом ударов, они показывают, как ограничения пропускной способности команд перекрываются на новых архитектурах, и показывают, как смешанная точность ухудшает нелинейное взвешивание высокого порядка. ## Что это меняет на практике Помогает разработчикам высокопроизводительной вычислительной гидродинамики (CFD) на графических процессорах центров обработки данных и рабочих станций безопасно развернуть эмуляцию двойного плавающего числа для ускорения до 3.94x без незаметной потери порядка точности при моделировании сверхзвуковых волн. ## Границы метода и риски Аппаратное перекрытие полностью не работает в архитектурах центров обработки данных Hopper и Blackwell из-за насыщения слотов инструкций деформации; смешанное размещение FP32/FP64 приводит к катастрофическому сбою сходимости (взрыв ошибок на 10^7) в схемах WENO 7-го и 9-го порядка. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** WENO reconstruction run time (us), speedup over native FP64 (x), overlap indicator (E), root-mean-square nodal density error (L2), order of accuracy (fitted order) - **Размер выборки / валидация:** N = 4 GPU architectures (A100, GH200, GB200, RTX PRO 6000 Blackwell), 3 WENO scheme orders (WENO5, WENO7, WENO9), 1D entropy wave & 2D Euler vortex grids up to n=256 - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)