Вычисления прямо в памяти чипов DRAM: новый метод устранил барьер передачи данных
Обработка в памяти (PIM) на основе DRAM устраняет «стену памяти», выполняя вычисления непосредственно внутри основной памяти. Однако чередование памяти и виртуальная память ограничивают размер смежных данных, видимых для модулей PIM, ограничивая степень детализации задач PIM. Чтобы смягчить это, существующие системы PIM радикально изолируют память PIM или отключают чередование памяти. Однако такие конструктивные решения уменьшают пропускную способность памяти ЦП и приводят к дополнительной передаче данных, что приводит к появлению дополнительной «стены системной памяти», которую необходимо устранить, чтобы реализовать весь потенциал PIM. В этой работе мы предлагаем GUMPIM, систему PIM, которая позволяет чередующимся страницам ЦП и нечередующимся страницам PIM сосуществовать в унитарном и гибком пространстве памяти с гарантированным распределением страниц PIM. GUMPIM обеспечивает нулевое копирование во время разгрузки задач PIM и поддерживает пропускную способность памяти ЦП, обеспечивая при этом низкие затраты на разгрузку PIM. Во-первых, мы предлагаем двухканальный механизм управления памятью, состоящий из независимого выделения страниц и трансляции адресов для страниц ЦП и PIM. Во-вторых, мы разрабатываем аппаратное обеспечение интерфейса GUMPIM на DRAM с поддержкой PIM, чтобы обеспечить динамическое сопоставление адресов для различных макетов данных на страницах ЦП и PIM. В-третьих, мы предлагаем механизм миграции страниц с помощью PIM, который прозрачно переносит страницы, сохраняя при этом пропускную способность доступа к ЦП, тем самым обеспечивая гарантированное и ускоренное распределение страниц PIM. GUMPIM не требует внесения изменений в стандартные стандарты DRAM; все аппаратные модификации ограничиваются стороной DRAM, что обеспечивает полную совместимость с существующими процессорами и позволяет немедленно развертывать их на текущих платформах PIM на базе HBMx и LPDDRx. Наши результаты показывают снижение производительности только <0.1% для рабочих нагрузок ЦП в GUMPIM. Для рабочих нагрузок PIM GUMPIM сокращает выделение памяти и время вычислений на процессоре на 2.7x и 4.93x соответственно, обеспечивая сквозное ускорение 2.3x по сравнению с современной базовой системой.
## В чем суть открытия Зачем изолировать память для вычислительных чипов DRAM, если новый метод объединения адресации CPU и PIM приведет к ухудшению производительности CPU <0.1% в 2,3 раза? ## Как это устроено: принцип работы Однако чередование памяти и виртуальная память ограничивают размер смежных данных, видимых для модулей PIM, ограничивая степень детализации задач PIM. Чтобы смягчить это, существующие системы PIM радикально изолируют память PIM или отключают чередование памяти. ## Что это меняет на практике В течение следующих 1–3 лет GUMPIM обеспечит плавное развертывание ускорителей PIM на стандартных платформах HBMx и LPDDRx без необходимости внесения изменений в архитектуру ЦП. Это обеспечивает значительную экономию энергии и задержек для рабочих нагрузок искусственного интеллекта с интенсивным использованием данных и периферийных вычислительных систем. ## Границы метода и риски Конструкция основана на специализированных модификациях оборудования на стороне DRAM и логике интерфейса, которые требуют принятия поставщиками памяти. Кроме того, прозрачная миграция страниц усложняет аппаратное обеспечение и увеличивает нагрузку на контроллер памяти. ## Результаты и доказательства - **Комплексный скор значимости:** 8.5 / 10.0 - **Уровень доказательности:** Теоретическое обоснование