Динамическая разгрузка уровней сокращает время обучения распределенного ИИ в нестабильных пограничных сетях
Модели обучения с использованием данных, распределенных по периферийным устройствам, представляют собой компромисс: централизация данных упрощает обучение, но вызывает проблемы конфиденциальности и нормативных требований, в то время как полное локальное обучение может превысить вычислительные возможности и емкость памяти устройств. Разделенное обучение решает эту проблему, разделяя модель между клиентами и сервером, позволяя разгрузить часть вычислений. Однако существующие подходы обычно полагаются на статические разделенные конфигурации или упрощенные предположения, которые не могут уловить неоднородность и сложную динамику реальных развертываний. Мы представляем DynSL, структуру, которая динамически распределяет уровни модели между клиентами и сервером путем постоянного мониторинга системных показателей и периодического решения проблемы оптимизации, которая учитывает вычисления и связь клиента и сервера. Когда это выгодно, система перенастраивает разделение, позволяя стратегии разгрузки адаптироваться к изменяющимся возможностям устройства и условиям системы. Обширные эксперименты на испытательном стенде из 24 разнородных периферийных устройств показывают, что DynSL сокращает время обучения до $\sim\!$30% по сравнению с самым сильным адаптивным базовым уровнем и более чем на 50% по неоптимальному равномерному распределению без потери, а иногда и с выигрышем, точности.
## В чем суть открытия DynSL ускоряет совместное обучение искусственному интеллекту на интеллектуальных устройствах за счет постоянной перебалансировки слоев нейронной сети между устройствами и облачными серверами в режиме реального времени по мере изменения скорости соединения и рабочих нагрузок устройств. ## Как это устроено: принцип работы DynSL непрерывно отслеживает скорость вычислений устройства и пропускную способность сети прямо в потоке обучения в реальном времени без явного профилирования. Используя эти метрики в реальном времени, центральный распределитель решает задачу быстрой полиномиальной оптимизации, которая динамически переносит уровни между клиентами и сервером, сочетая это со специализированной древовидной схемой агрегирования весов, которая правильно взвешивает миграции моделей в середине эпохи. ## Что это меняет на практике Обеспечивает совместное обучение искусственному интеллекту с сохранением конфиденциальности на разнородных периферийных устройствах (телефоны, Интернет вещей, автономные устройства), не создавая узких мест облачным серверам и не тратя заряд батареи клиента на профилирование. ## Границы метода и риски Опирается на детерминированную топологию однопутевой модели, предполагает грубые границы разделения слоев, непрямое управление энергопотреблением посредством статических ограничений максимального уровня и начальную задержку реконфигурации при холодном запуске. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** Epoch completion time (s), Time-to-accuracy (min), Validation accuracy (%) - **Размер выборки / валидация:** N = 24 physical edge devices (Jetson AGX Orin, Orin Nano, Xavier NX, Nano, LattePanda, Orange Pi), simulated populations up to 120 clients - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)