Компактные вычисления вместо тяжелых нейросетей: как предсказывать хаотичные события по горстке измерений
Фиксированное количество недавних наблюдений может охватывать минуты для одной переменной и дни для другой. Более ранние измерения еще могут показать, является ли последнее значение необычным для этой переменной. Мы предлагаем TRESS (последние события и статистические сводки с метками времени) — модель прогнозирования, которая сохраняет последние наблюдения в исходное время и суммирует полную историю каждой переменной. Для данного набора переменных и бюджета мероприятия это представление остается того же размера по мере роста записи. Его модуль обработки событий, обусловленный запросом, взвешивает отклонения от последнего значения в зависимости от возраста каждого наблюдения и горизонта прогноза. Декодер для конкретного канала объединяет полученные функции с исторической статистикой и сводкой, общей для всех переменных, чтобы спрогнозировать поправку к последнему значению. Сохраняя от 8 до 16 наблюдений на каждую переменную, TRESS фиксирует самые низкие средние тестовые MSE и MAE среди сравниваемых методов по всем четырем критериям. Обработка 32 последовательных запросов из одной закодированной истории сокращает время вывода процессора в 2,12–2,60 раза для четырех наборов данных. Код находится по адресу https://github.com/SSMa913/NICLab-TRESS.
## В чем суть открытия Десятилетиями моделирование реального мира упиралось в фундаментальную дилемму дискретизации. В реанимационных отделениях, климатических станциях и сейсмических сетях наблюдения никогда не приходят по расписанию: один биомаркер фиксируется раз в трое суток, другой пульсирует каждые пять минут, а третий исчезает из карты пациента на недели. Машинное обучение традиционно отвечало на этот хаос чудовищным усложнением — исследователи создавали дифференциальные уравнения непрерывного времени, графовые сети и трансформеры с многомерным кодированием времени. Парадокс заключался в том, что эти гигантские модели нередко уступали тривиальному правилу инерции («завтра будет то же самое, что сегодня»), растрачивая ресурсы на восстановление бесконечно сложной динамики между редкими точками. Новое исследование кардинально переламывает парадигму: чтобы заглянуть в будущее нестабильной системы, не нужно реконструировать непрерывную траекторию. Достаточно удержать компактный буфер из восьми-шестнадцати последних замеров и дополнить его пятью статистическими моментами всей предыстории. ## Как это устроено: принцип работы Концепция опирается на строгое разделение локальной динамики и глобального масштаба. Вместо заполнения пропусков алгоритм берет последнее известное значение переменной за безусловный якорь. Все предшествующие измерения внутри буфера переводятся в относительные отклонения от этого значения. Механизм подъема событий взвешивает полезность каждого старого замера: специальный вентиль сопоставляет возраст точки с дальностью прогноза. Если измерение устарело, а горизонт велик, вес отклонения угасает. Параллельно сквозной блок вычисляет пять агрегатов по всей истории переменной: среднее, минимум, частоту минимума, дисперсию и число точек. Эти параметры сжимаются в общий межпеременный контекст. Когда целевой датчик молчит слишком долго, вентиль усиливает влияние смежных каналов, восполняя информационный дефицит за счет коллективного поведения системы. ## Результаты и доказательства Тестирование проводилось на четырех классических бенчмарках нерегулярных рядов: анализе движений HumanActivity (1360 записей, 12 каналов), климатической сети USHCN (1114 записей, 5 переменных), клинической базе PhysioNet (11 981 пациент, 36 признаков) и реанимационном массиве MIMIC (21 250 госпитализаций, 96 признаков). Сеть содержала всего от полутора до девяти тысяч обучаемых параметров. На сложном датасете MIMIC среднеквадратичная ошибка прогноза снизилась