Согласование скрытых ритмов мозга побеждает громоздкие нейросети в чтении электрической активности
Базовые модели, предварительно обученные на больших немаркированных корпусах электроэнцефалографии (ЭЭГ), стали преобразующей парадигмой для приложений интерфейса мозг-компьютер (BCI). Недавние базовые модели ЭЭГ показали, что многомасштабные представления, полученные из участков фиксированной длины, могут улучшить обучение представлениям ЭЭГ. Существующие платформы обычно создают временные шкалы посредством операций на уровне объектов. Однако эти операции оставляют неявным соответствие между изученными функциями и масштабными характеристиками исходных сигналов ЭЭГ. Более того, когда цель самоконтроля не согласована с многомасштабными входными представлениями, информация в некоторых временных масштабах может подвергаться недостаточному контролю во время предварительного обучения. В свете этого мы предлагаем ScaleBrain, согласованную по масштабу структуру предварительного обучения, которая явно координирует многомасштабные представления ЭЭГ как со стороны входных данных модели, так и со стороны целей оптимизации. В частности, ScaleBrain представляет многомасштабную токенизацию ЭЭГ для представления одного и того же сегмента ЭЭГ через окна анализа с разными временными интервалами и общими временными привязками, а также объединяет эти представления с реконструкцией для конкретного масштаба, чтобы согласовать их с многомасштабной входной структурой и обеспечить контроль временных разрешений во время самостоятельного обучения. Далее мы разрабатываем осевой пространственно-временной механизм внимания, чтобы контекстуализировать объединенное многомасштабное представление в пространственных и временных измерениях. Обширные оценки шести общедоступных тестов BCI по сравнению с 12 репрезентативными базовыми показателями показывают, что ScaleBrain достигает наивысшей средней сбалансированной точности в пяти наборах данных и занимает третье место в оставшемся одном, имея всего 5,0 млн параметров, демонстрируя высокую производительность и хорошую эффективность параметров.
## В чем суть открытия Декодирование активности мозга похоже на прослушивание оркестра: медленные ритмичные басы и мимолетные высокие ноты должны быть выровнены в одном ритме, чтобы услышать симфонию, а не хаотичный шум. ## Как это устроено: принцип работы ScaleBrain сегментирует непрерывные данные ЭЭГ на грубые, средние и мелкие временные окна, привязанные к общим временным якорям. Двухветвевой конвейер извлекает спектральные спектрограммы через STFT и необработанные сигналы через сверточные слои, а затем объединяет их с позиционным кодированием с учетом масштаба. Во время самостоятельного обучения он реконструирует спектральные представления в зависимости от масштаба, используя взвешенные объективы с несколькими разрешениями. ## Что это меняет на практике Позволяет использовать сверхкомпактные базовые модели с 5M параметрами на клиническом оборудовании BCI с ограниченными ресурсами и портативных нейротехнологиях, обеспечивая современную диагностическую точность для классификации приступов, определения стадий сна и воображения движений. ## Границы метода и риски Корпус перед обучением ограничен записями ЭЭГ скальпа, прирост в сложных задачах аффективной классификации скромен, а масштабирование за пределами трех временных разрешений приводит к репрезентативной избыточности и нестабильности обучения. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** Balanced Accuracy, AUC-PR, AUROC, Cohen's Kappa, Weighted F1 - **Размер выборки / валидация:** N = 1,175,693 pre-training EEG samples (~9,797 hours) across 6 downstream BCI datasets