ИИ заставили расшифровать собственные нейронные сигналы через подбор идеальных текстовых провокаций
Чтобы интерпретировать направление в остаточном потоке языковой модели, мы можем искать текст, который его сильно активирует. Но когда такой текст обнаруживается путем сканирования корпуса, он ограничивается тем, что содержит этот корпус. Мы разрабатываем метамодели максимально активирующих примеров (MAEM), языковые модели, которые отображают остаточные направления потока из предметной модели в текстовые образцы, которые сильно активируют эти направления. Наша цель — максимизировать косинусное сходство направления подаваемого остаточного потока с активациями текста, генерируемого MAEM. Эта цель RL без меток помогает масштабировать MAEM на различных источниках направлений остаточного потока. Эмпирически мы обнаружили, что результирующая метамодель дает информативные примеры: Qwen3.6-27B MAEM инвертирует удерживаемые активации лучше, чем поиск по корпусу или автокодировщик естественного языка (NLA), превосходит поиск по корпусу (при 10 млн токенов) на большинстве удерживаемых языков/доменов и активирует 89% удерживаемых функций SAE. Он также определяет концепции, лежащие в основе векторов управления, а также NLA, восстанавливает полезную нагрузку бэкдоров LoRA чаще, чем поиск по корпусу, и может даже озвучить внутренний монолог некоторой модели рабочего пространства. В отличие от объяснений, созданных другими метамоделями (например, NLA), образцы MAEM можно проверить путем прямого прохода по предметной модели, что делает цель MAEM обоснованной альтернативой для масштабирования обучения метамоделей.
## В чем суть открытия Вместо того, чтобы искать в огромной библиотеке книгу, в которой туманно упоминается какая-то концепция, представьте себе машину, которая мгновенно пишет специальную историю, специально предназначенную для срабатывания целевого провода в мозгу. ## Как это устроено: принцип работы Максимально активирующие метамодели примеров (MAEM) вводят остаточное направление потока в модель генератора и оптимизируют сгенерированный текст с помощью обучения с подкреплением. Цель напрямую максимизирует косинусное сходство между целевым вектором активации и внутренней реакцией субъектной модели на сгенерированный текстовый диапазон. Это создает сквозной проверяемый цикл инверсии, основанный на прямых проходах. ## Что это меняет на практике Обеспечивает автоматизированный, математически поддающийся проверке аудит безопасности, точную настройку «черного ящика», обнаружение троянских лазеек, декодирование управляющего вектора и автоматическую интерпретацию функций, не полагаясь на необоснованных экспертов по объяснениям LLM. ## Границы метода и риски Не удается активировать 11.3% функций SAE (концентрированы на редких хвостовых и структурных/позиционных концепциях, таких как таблицы или форматирование списков) и демонстрирует меньшее разнообразие выборки (оценка Венди 2,2 против 2,9 базового уровня корпуса) из-за цели одновекторного максимального косинуса RL. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** Centered cosine score on held-out activations (0.82 vs 0.57 corpus search), AxBench steering vector concept identification accuracy (95.8%), rank-1 LoRA trojan backdoor payload recovery (85% verbatim, 90% semantic), SAE feature activation rate (89% fired). - **Размер выборки / валидация:** N = 512 held-out residual directions, 21 non-English/code/math domains, 500 AxBench concepts, 119 BiPO persona vectors, 48 rank-1 LoRA backdoors, 512 BatchTopK SAE features. - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)