Архитектура с открытым исходным кодом сокращает затраты на связь с графическим процессором и открывает возможности многопутевой передачи данных
По мере роста плотности вычислительной мощности крупномасштабных кластеров ИИ сетевая связь все больше ограничивает производительность системы. Связь, инициируемая графическим процессором, требует отправки запроса с низкими накладными расходами, чтобы перекрывать связь с вычислениями. Однако GPUDirect RDMA (GDR) по-прежнему полагается на участие ЦП в своем пути управления, в то время как InfiniBand GPUDirect Async (IBGDA) требует, чтобы графические процессоры собирали записи рабочей очереди (WQE), потребляя дополнительные ресурсы SM и пропускную способность памяти. Мы предлагаем OpenRDMA, многопутевую надежную транспортную архитектуру RDMA с открытым исходным кодом, предназначенную для связи с использованием графических процессоров. Во-первых, OpenRDMA предоставляет минимальный механизм дверного звонка графического процессора: графический процессор выдает 8-байтовый токен, а выделенный сетевой адаптер FPGA восстанавливает полный WQE из предварительно сконфигурированного контекста. Во-вторых, основанный на многопутевом надежном соединении (MRC), OpenRDMA поддерживает многопутевую транспортировку каждого пакета и доставку вне очереди, в то время как выборочная повторная передача, упорядоченное размещение DMA и опрос флагов, видимых для графического процессора, обеспечивают надежную доставку и безопасное потребление данных. В-третьих, совместный механизм повторной передачи, разработанный аппаратно-программным обеспечением, упрощает путь передачи данных графического процессора и снижает нагрузку на аппаратное состояние FPGA: сетевой адаптер обеспечивает быструю передачу данных, а программное обеспечение ЦП управляет сложным обнаружением тайм-аута, отслеживанием состояния и политиками восстановления. Описываем архитектуру и ключевые аппаратные компоненты OpenRDMA; продолжается реализация прототипа ПЛИС.
## В чем суть открытия Что, если принуждение современных графических процессоров искусственного интеллекта действовать как центральные процессоры во время сетевых передач на самом деле ограничивает пропускную способность кластера, а не ускоряет? ## Как это устроено: принцип работы Вместо того, чтобы заставлять графический процессор создавать полные записи рабочей очереди, графический процессор выдает 8-байтовый токен дверного звонка, который аппаратное обеспечение FPGA анализирует для синтеза запросов. OpenRDMA распределяет пакеты не по порядку по нескольким путям SRv6, используя значения энтропии, отслеживая их прибытие через получаемые растровые изображения и уведомляя удаленный графический процессор только тогда, когда размещение полезной нагрузки и зависимости полностью удовлетворены. ## Что это меняет на практике Позволяет сверхплотным кластерам графических процессоров обходить перегрузку однопутевой сети и задержку пути управления ЦП, ускоряя распределенные итерации обучения больших моделей до уровня 3.5x на многоканальном оборудовании. ## Границы метода и риски Использует выделенное оборудование FPGA для синтеза WQE, в настоящее время страдает от блокировки начала строки между QP в общих очередях вывода из эксплуатации и требует дальнейшей физической проверки ASIC/PCIe. ## Результаты и доказательства - **Комплексный скор значимости:** 9.6 / 10.0 - **Уровень доказательности:** Теоретическое обоснование - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)