Тайная брешь в суперкомпьютерных чипах: как один поток вычислений парализует работу графических процессоров
Графические процессоры являются основной платформой для крупномасштабного машинного обучения и используются в крупнейших суперкомпьютерах. Их модули загрузки/сохранения (LSU) часто определяют производительность ядра и использовались в предыдущих атаках. Однако о LSU известно лишь несколько изолированных механизмов и параметров, и даже одного было достаточно для атаки. В частности, до сих пор неизвестно, сколько стоит нагрузка, где они конкурируют, и даже может ли варп «голодать» из-за конкуренции. Пока каждый из них не будет измерен, ни его риск безопасности, ни защита не известны. Мы проводим реверс-инжиниринг того, как LSU выполняет инструкции по загрузке на новейших графических процессорах NVIDIA, с помощью микротестов и анализируем последствия для безопасности. Мы даем формулу задержки с точностью до цикла для глобального попадания L1 или доступа к общей памяти с адресов, которых он касается, чьи зависящие от адреса условия - это конфликты банков и поиск тега L1; мы показываем, что нагрузки конкурируют в обоих случаях, и что когда конвейер LSU заполнен, варп может истощить варп блока, запущенного позже. Затем мы показываем, что поверхность атаки LSU гораздо шире, чем было выявлено предыдущими атаками: по каналам, которые никогда ранее не использовались, он может утечь информацию, скрытно общаться и ухудшать работу совместно размещенных рабочих нагрузок. С помощью глобальных банковских конфликтов или только поиска тегов мы восстанавливаем полный ключ AES-128 в соответствии с моделью угроз предыдущих атак по времени GPU AES. В рамках Multi-Process Service (MPS) NVIDIA доступ к банку и поиск тегов открывают скрытый канал между процессами, скорость которого увеличивается с каждым поколением графического процессора. Также в MPS это голодание позволяет за один варп замедлить умножение совмещенной матрицы cuBLAS до 750x на A100 и 563x на H100.
## В чем суть открытия На протяжении десятилетий развитие графических процессоров опиралось на негласное допущение: аппаратные блоки управления памятью работают как беспристрастные арбитры, распределяющие такты микросхем со строгой математической справедливостью. Внутренние механизмы блоков загрузки и сохранения оставались коммерческой тайной производителей чипов, а безопасность систем оценивалась лишь по разрозненным эмпирическим догадкам. Считалось, что внутренние конфликты банков памяти и задержки кэша создают лишь незначительные накладные расходы при вычислениях. Это белое пятно в кремниевой архитектуре превратилось в колоссальную брешь в эпоху мультиарендных облачных платформ, где серверные ускорители одновременно делят между собой независимые и потенциально враждебные процессы. ## Как это устроено: принцип работы Блок загрузки и сохранения отвечает за доставку данных из общей памяти и кэша первого уровня в регистры вычислительных нитей. Каждое обращение к памяти разделяется на два этапа: сопоставление адресных меток и прямое чтение из тридцати двух физических банков статической памяти. Реверс-инжиниринг показал, что проверка меток кэша распределяется между четырьмя специализированными модулями через линейную хеш-функцию над битами адреса, а само чтение данных обслуживается всего двумя параллельными каналами со скоростью один такт на операцию. При этом модуль проверки меток способен обслуживать лишь одну инструкцию во всем потоковом мультипроцессоре за раз. Когда агрессивный поток целенаправленно генерирует постоянные коллизии адресов и заполняет конвейер памяти, аппаратный планировщик суб-ядра начинает отдавать приоритет исключительно потокам ранее запущенных блоков. В итоге поток, стартовавший позже на том же суб-ядре, оказывается в жесткой блокаде: его запросы игнорируются на протяжении десятков тысяч тактов, пробиваясь к памяти лишь по периодическому таймеру чипа. ## Результаты и доказательства Микротесты на микроархитектурах Volta, Ampere и Hopper подтвердили модель задержек с потактовой точностью: каждый дополнительный конфликт банков добавляет ровно два такта к задержке инструкции. В тестах с разделением ресурсов через технологию Multi-Process Service единственный вредоносный поток замедлил матричное умножение из библиотеки cuBLAS в 1221 раз на ускорителях A100 и в 563 раза на H100. Даже когда атакующий поток размещался всего на одном потоковом мультипроцессоре, задержка завершения всей вычислительной задачи возрастала в 750 раз из-за ожидани