Нейросети находят скрытые траектории цен за доли секунды до исполнения биржевых сделок
Генеративные модели стали стандартным подходом к языку и зрению. Эти модели обычно сначала предварительно обучаются, а затем настраиваются. Недавняя работа демонстрирует, как предварительно обучить авторегрессионную генеративную модель на данных потока заказов уровня 3. Однако, насколько нам известно, никто еще не настроил такую модель для последующих задач. Здесь мы сначала предварительно обучаем генеративную модель с 300 млн параметров на данных о потоке заказов уровня 3, собранных с двух криптобирж: Bitstamp и Bitfinex. Затем мы настраиваем предварительно обученную модель, чтобы предсказать доходность микроцены и ее реализованную волатильность. Мы показываем, что наша точно настроенная модель превосходит классические базовые модели, такие как повышение градиента созданных вручную функций, в прогнозировании доходности микроцен на горизонте менее секунды. Более того, прогнозирующая способность модели переносит нулевую вероятность на активы, для которых она никогда не была точно настроена. Из-за краткосрочного характера этих прогнозов, прогнозируемые движения микроцен меньше, чем спред между ценой покупки и продажи плюс комиссионные, поэтому естественные заявки находятся в стадии исполнения и формирования рынка. Эти результаты показывают, что предварительно обученная генеративная модель может быть превращена в конкурентоспособный прогнозист цен на короткий период посредством точной настройки.
## В чем суть открытия Механизм обмене подобен толпе, перешептывающейся перед аукционом: вместо того, чтобы наблюдать за окончательными ставками, вы прислушиваетесь к каждому отмененному ропоту и предварительному предложению, чтобы оценить, где цены наклоняются за долю секунды до того, как кто-нибудь закричит. ## Как это устроено: принцип работы Модель разбивает события заказов уровня 3 на дискретные представления действия, стороны, относительной цены, объема и задержки, потребляемых авторегрессионным преобразователем с 300 млн параметров. Головы низкоранговой адаптации (LoRA) напрямую связаны с внутренними представлениями, а не запускают разомкнутое развертывание, прогнозируя форвардную доходность микроцен и реализуя волатильность с отделенными потерями Хубера. ## Что это меняет на практике Позволяет алгоритмическим маркет-мейкерам и интеллектуальным маршрутизаторам ордеров фильтровать неблагоприятный выбор и динамически отменять пассивные котировки за миллисекунды до поступления ликвидности. ## Границы метода и риски Прогнозируемые смещения цен остаются меньшими, чем биржевые комиссии и спреды (<2 б.п.), преимущество направления исчезает за 5 секунд, а входящие пакеты заказов могут насыщать бюджеты вывода одного графического процессора. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** Pearson correlation of forward microprice return (0.44 at 0.2s vs 0.23 OBI and 0.39 GBM), Pearson correlation of realized volatility (0.52 at 0.2s vs 0.43 GARCH), inference latency (4.0 ms p50 on H100) - **Размер выборки / валидация:** N = 2.76B pretraining tokens, 24M fine-tuning tokens, 37 hours across 5 embargoed holdout test windows