Почему сложные формулы десятилетиями замедляли нейросети и как один взгляд вперед решил проблему
Стохастические диффузионные пробоотборники часто требуют значительно большего количества оценок нейронных функций (NFE), чем детерминированные пробоотборники, для достижения сопоставимого качества выборки. Хотя дискретизация более высокого порядка ускоряет детерминированную выборку, ее преимущества для стохастической выборки остаются неясными. Мы устанавливаем совпадающие верхние и нижние границы для наихудшего случая, показывая, что стохастические пробоотборники с аппроксимациями более высокого порядка остаются сходящимися в первом порядке даже с точными оценочными функциями. Таким образом, увеличение порядка аппроксимации, как правило, не улучшает порядок сходимости. Руководствуясь этим ограничением, мы вводим дискретизацию по прямому значению — структуру, не требующую обучения, которая оценивает модель прогнозирования данных/шума по прогнозной оценке, построенной на основе предыдущих прогнозов. Для детерминированной выборки полученный в результате Forward DPMSolver (F-DPMSolver) улучшает качество выборки при небольших бюджетах NFE благодаря варианту на основе DDIM, несмотря на то, что он остается конвергентным первого порядка. Для стохастической выборки мы разрабатываем Forward DDPM (F-DDPM), который оценивает модель в более чистой точке прогнозирования, скорректированной для последующего введения шума. Эта оценка повторно использует как предсказание предыдущей модели, так и ранее введенный шум. Оба варианта допускают гарантии сходимости первого порядка с одной оценкой модели на итерацию. В CIFAR-10, ImageNet, FFHQ и LSUN F-DDPM последовательно достигает более низкого FID, чем оцененные стохастические базовые уровни при соответствующих бюджетах NFE. Имея в 1,5 раза больше NFE, чем детерминистические базовые показатели, он обеспечивает конкурентоспособное качество выборки, сокращая разрыв в практической эффективности между стохастической и детерминированной выборкой. Код доступен по адресу https://github.com/Na-Li66/F-DDPM.
## В чем суть открытия Почему добавление расширенного исчисления к диффузионным моделям не смогло ускорить генерацию изображений, в то время как простое угадывание следующего шага сократило задержку вдвое? ## Как это устроено: принцип работы Стандартные стохастические диффузионные сэмплеры оценивают функции оценки нейронной сети в зашумленном текущем состоянии, теряя точность, поскольку введенный броуновский шум нарушает траектории. Вместо этого дискретизация по прямому значению оценивает сеть по более чистой упреждающей координате, вычисленной на основе предыдущих итераций. Регулируя время оценки с учетом предстоящего введения стохастического шума и кэшируя предшествующие векторы шума, он поддерживает одну оценку на каждом шаге. ## Что это меняет на практике Служит мгновенной, не требующей обучения заменой существующих диффузионных конвейеров в синтезе изображений, преобразовании текста в речь и генеративном проектировании, сокращая требования к вычислениям стохастической выборки с 30% до 50% без переобучения архитектуры. ## Границы метода и риски Теоретический порядок сходимости остается первым O(1/M) без формального асимптотического ускорения; преимущества в производительности сужаются при больших бюджетах NFE (M >= 15), а взаимодействие с агрессивным руководством без классификатора остается непроанализированным. ## Результаты и доказательства - **Комплексный скор значимости:** 9.6 / 10.0 - **Уровень доказательности:** Теоретическое обоснование - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)