Невидимый сбой облачных серверов парализует вычисления микроскопическим потоком данных
Современные облачные платформы используют регулирование пропускной способности памяти для изоляции совместно расположенных рабочих нагрузок, неявно предполагая, что высокое совокупное потребление полосы пропускания подразумевает высокие помехи. Мы показываем, что это предположение в корне ошибочно. Мы представляем Single-Bank Attack (SBA), практическую атаку типа «отказ в обслуживании» памяти, которая вызывает чрезвычайное замедление работы нескольких ядер — более чем на три порядка для жертв с интенсивным использованием памяти (например, декодирование LLM) — при этом потребляя менее 1 ГБ/с пропускной способности памяти. SBA использует разницу между пиковой и наихудшей пропускной способностью DRAM, концентрируя операции записи в память в одном банке, вызывая постоянные конфликты строк и частую утечку записи, тем самым снижая скорость обслуживания памяти. В системах Intel и AMD, включая платформы на базе DDR5 и HBM2E, SBA постоянно вызывает замедление на порядки величины при реалистичных многопользовательских настройках, раскрывая фундаментальное ограничение изоляции памяти, ориентированной на полосу пропускания. Мы также показываем, что эта локализованная конкуренция распространяется по всей системе: перегрузка одного банка насыщает очереди контроллера памяти и вызывает обратное давление на общий кеш и структуры когерентности, в конечном итоге ограничивая внедрение запросов к памяти между ядрами. Следовательно, серьезные помехи могут возникнуть даже при низкой совокупной пропускной способности, что позволяет избежать существующих механизмов QoS на основе полосы пропускания, таких как Intel RDT MBA. Чтобы устранить это ограничение, мы предлагаем IQ-MemGuard, легкий программный регулятор пропускной способности памяти, который обнаруживает устойчивую конкуренцию с помощью сигналов микроархитектуры и выборочно ограничивает внедрение патологических запросов. Наша реализация на платформе Intel эффективно снижает SBA, тогда как аппаратный механизм QoS Intel полностью не работает.
## В чем суть открытия 64-полосное шоссе, где один водитель постоянно останавливается у одной точки взимания платы за проезд, в результате чего автомобили позади блокируют развязку и блокируют все остальные открытые полосы движения. ## Как это устроено: принцип работы Злоумышленник наполняет один банк DRAM операциями записи с конфликтом строк, снижая пропускную способность этого банка до физического предела наихудшего случая (~ 1 ГБ/с). Поскольку контроллер памяти не может опустошить свою очередь отложенной записи, структурное противодавление возвращается в таблицу запросов когерентности кэша, останавливая операции с памятью во всех ядрах независимо от их целевого адреса. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** code_benchmark - **Бенчмарки и прирост:** Victim execution slowdown factor (x), LLM decode tokens/sec, Write Pending Queue occupancy, Table of Requests latency (cycles), aggregate memory bandwidth (GB/s) - **Размер выборки / валидация:** N = 4 hardware platforms (Intel Xeon Max 9462, AMD EPYC 9354P, Intel i9-13900K, AMD Ryzen 9 9900X), 10 SPEC CPU2017 benchmarks, 2 matmul kernels, Llama3-8B LLM, and 6 Google Cloud Run production deployments - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода) ## Что это меняет на практике Демонстрирует, что существующие облачные регуляторы качества обслуживания (например, Intel RDT MBA) принципиально не учитывают архитектурный отказ в обслуживании с низкой пропускной способностью, что требует мониторинга занятости очередей или динамического разделения банков в стеках виртуализации гипермасштабирования. ## Границы метода и риски Для смягчения последствий с помощью IQ-MemGuard требуются счетчики производительности без ядра (занятость WPQ и задержка ToR), недоступные на платформах AMD, и они не могут надежно отличить вредоносные записи в один банк от безопасных пакетов без риска ложноположительного регулирования ядра.