Скрытый изъян симуляций: почему замеры микропроцессоров упускают колоссальные скачки скорости
SPEC CPU2026, последнее поколение тестов процессоров SPEC, станет стандартным набором тестов в исследованиях компьютерной архитектуры, где новые проекты часто оцениваются посредством выборочного моделирования с помощью таких инструментов, как SimPoint. Существующие характеристики набора сосредоточены на средних значениях всего прогона, которые не показывают ни того, как поведение меняется в рамках прогона, ни того, насколько хорошо выборка его отражает. Мы характеризуем CPU2026 на реальном оборудовании на трех уровнях: программы, фазы и образцы. На уровне программы мы сообщаем об общих показателях и нисходящих классах узких мест для всех четырех пакетов и исследуем, как они меняются в зависимости от размера рабочей нагрузки, версии компилятора и платформы на машинах с тремя различными архитектурами набора команд: x86, Arm и RISC-V. Примечательно, что изменение только версии компилятора может вдвое или почти вдвое снизить IPC отдельных тестов. На фазовом уровне мы отслеживаем аппаратные счетчики каждые 10 мс по всем 90 входам SPECrate, выявляем повторяющиеся закономерности изменяющегося во времени поведения и делим входы на три группы: устойчивые, многофазные и импульсные. Более половины входных данных демонстрируют изменяющееся во времени поведение, а IPC в пределах одного входного сигнала может различаться более чем на порядок. На уровне выборки мы проверяем SimPoint на соответствие аппаратным измерениям каждого интервала, который он может выбрать. SimPoint точен на стабильных входных данных, но его ошибка достигает 43% на остальных, а изменение только случайного начального значения приводит к распространению ошибки одного входного сигнала в диапазоне 58 процентных пунктов. Сохранение кластеров SimPoint, но выбор каждого представителя по измеренному индексу потребительских цен (CPI) приводит к тому, что все входные данные попадают в 2.6%, поэтому ошибка возникает из-за выбора представителей, а не из-за кластеризации. В заключение мы приводим практические рекомендации по стратегии выборки для CPU2026, которые дают исследователям более глубокое понимание пакета и показывают, где необходимы дополнительные усилия по моделированию, чтобы сохранить точность результатов выборки.
## В чем суть открытия Оценка марафонца только по среднему темпу скрывает крутые подъемы; выборка одинаковых шагов предполагает, что каждая миля ровная, тогда как невидимая местность вызывает огромные сваливания. ## Как это устроено: принцип работы Архитекторы процессоров используют векторы базовых блоков для кластеризации выполнения кода и выбирают один репрезентативный образец для моделирования всей рабочей нагрузки. The study demonstrates that identical code paths experience wildly different memory stalls and cache misses, meaning code frequency does not guarantee uniform execution velocity. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** code_benchmark - **Бенчмарки и прирост:** IPC, CPI estimation error (%), L1I/L1D/LLC MPKI, Top-Down stall breakdowns - **Размер выборки / валидация:** N = 52 benchmarks across 4 suites, 90 SPECrate inputs on x86, 3 ISAs (x86, Arm, RISC-V) ## Что это меняет на практике Не позволяет архитекторам микросхем проектировать будущие микроархитектуры на основе вводящих в заблуждение симуляций или ошибочной оценки количества основных инструкций за такт более чем на 40% во время дорогостоящих циклов разработки. ## Границы метода и риски Требуются собственные аппаратные измерения счетчиков перед моделированием для классификации фаз; не может предварительно классифицировать код, работающий исключительно на еще не созданных прототипах архитектуры.