Почему мощные видеокарты простаивают при отрисовке цифровых городов и как это исправить
3D Gaussian Splatting (3DGS) обеспечивает фотореалистичный рендеринг в реальном времени на обычных графических процессорах и все чаще применяется в генеративных моделях мира и симуляторах автономного вождения. Однако существующие оптимизации основаны на алгоритмических изменениях, которые часто требуют переобучения, или на специализированных ускорителях, которым не хватает гибкости в развивающихся вариантах 3DGS. В этой статье мы выявляем фундаментальную неэффективность 3DGS-рендеринга на основе графического процессора: серьезный дисбаланс нагрузки на уровне SM, вызванный неравномерной рабочей нагрузкой на плитках экрана. Этот дисбаланс создает длинный хвост выполнения, в результате чего большинство SM простаивает, в то время как некоторые обрабатывают фрагменты с интенсивными вычислениями, особенно в крупномасштабных городских сценах. Чтобы решить эту проблему, мы представляем программно-определяемый подход к планированию графического процессора, который уменьшает хвост выполнения. Наш подход использует постоянное ядро для планирования тяжелых плиток в первую очередь и выборочно распределяет выходящие плитки по нескольким CTA. Упрощенная покадровая политика определяет, когда и сколько разбивать на фрагменты, используя статистику тайлов, уже доступную в конвейере рендеринга. Наш подход не требует ни переобучения, ни специального оборудования и может применяться ортогонально к существующим оптимизациям в различных вариантах 3DGS. В среднем для каждой сцены он ускоряет альфа-смешение до 2.93x на крупномасштабной городской сцене и до 5.6x на наиболее несбалансированных кадрах, сохраняя при этом исходную формулу альфа-смешивания.
## В чем суть открытия Супермаркет с десятками открытых касс, но девяносто процентов покупателей вынуждены выстроиться в одну очередь за одним человеком с двадцатью переполненными тележками, в то время как остальные кассиры сидят без дела. ## Как это устроено: принцип работы Стандартные растеризаторы жестко сопоставляют каждый фрагмент экрана с одним блоком потока графического процессора, в результате чего плотные фрагменты переднего плана останавливают весь кадр, в то время как другие мультипроцессоры простаивают. Этот подход сортирует плитки по рабочей нагрузке с использованием постоянного программного ядра, динамически разделяет плитки с узкими местами на фрагменты глубины по нескольким ядрам и использует сигнализацию атомарного насыщения для раннего прекращения скрытых фоновых вычислений. ## Что это меняет на практике Обеспечивает фотореалистичное моделирование в режиме реального времени с высокой частотой кадров для цифровых двойников автономного вождения (таких как NVIDIA Omniverse NuRec и AlpaSim) и генеративные 3D-модели мира на стандартных графических процессорах рабочих станций без переобучения весов сцены или приобретения специальных ASIC. ## Границы метода и риски Оптимизации ускоряют исключительно этап растеризации альфа-смешивания, не ускоряя начальное проецирование камеры или проходы сортировки; ускорение уменьшается до почти нейтрального (1.01-1.06x) в разреженных или уже сбалансированных сценах, где разделение накладных расходов сводит на нет увеличение задержки хвоста. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** Alpha blending speedup (up to 2.93x per scene, 5.64x per frame), SM activity percentage, PSNR delta (≤0.0015 dB), SSIM delta (0.0000), LPIPS delta (0.0000) - **Размер выборки / валидация:** N = 19 scenes across 6 categories (Mip-NeRF 360, Tanks & Temples, Deep Blending, MatrixCity, nuScenes, Waymo, PandaSet, Argoverse 2, Lyra 2.0) on 2 GPU architectures (NVIDIA GB10 and RTX A6000)