Взлом нейросетей изнутри: диффузионные алгоритмы научились обходить защиту языковых моделей
\emph{Непрерывное пространство} Атаки находят подсказки, которые вызывают вредоносное поведение, например, чрезмерное мышление, в LLM-черных ящиках путем выборки или оптимизации низкоразмерного гауссовского скрытого пространства и декодирования его в текст посредством \emph{случайного сопоставления} и поиска ближайшего токена. Поскольку случайное отображение не изучается из языка, его подсказки могут быть весьма неестественными и, как таковые, легко обнаруживаются с помощью ограничителей ввода, а оценки риска, которые они дают, не основаны на естественных подсказках. В этой статье мы демонстрируем, что одна и та же структура непрерывного скрытого пространства может быть напрямую связана с изученным генеративным распределением по языку, языковой моделью непрерывной диффузии (dLLM), которая удаляет искусственное случайное отображение, сохраняя при этом стандартную гауссовскую скрытую формулировку и последующую процедуру выборки или оптимизации. Мы оцениваем этот подход в двух вариантах: оценка на основе выборки с использованием \emph{RareTrap} и поиск на основе оптимизации с использованием \emph{ThinkTrap}. Мы обнаружили, что недоумение на уровне персонажа падает с $10^3$--$10^7$ до 3-5 в RareTrap и с 20-28 до 4,3-5,4 в ThinkTrap. Мы также обнаружили, что оценки риска модели могут различаться на порядок в двух отображениях.
## В чем суть открытия Почему LLM-атаки «черного ящика» производят тарабарщину и как латентная непрерывная диффузия может вызвать чрезмерное переосмысление с естественными подсказками? ## Как это устроено: принцип работы Поскольку случайное отображение не изучается из языка, его подсказки могут быть весьма неестественными и, как таковые, легко обнаруживаются с помощью ограничителей ввода, а оценки риска, которые они дают, не основаны на естественных подсказках. В этой статье мы демонстрируем, что одна и та же структура непрерывного скрытого пространства может быть напрямую связана с изученным генеративным распределением по языку, языковой моделью непрерывной диффузии (dLLM), которая удаляет искусственное случайное отображение, сохраняя при этом стандартную гауссовскую скрытую формулировку и последующую процедуру выборки или оптимизации. ## Что это меняет на практике Позволяет специалистам по искусственному интеллекту и исследователям безопасности точно оценивать устойчивость облака LLM к скрытым атакам типа «отказ в обслуживании», которые обходят стандартные фильтры недоумения в условиях реалистичного трафика развертывания. ## Границы метода и риски Требует дополнительных вычислительных затрат 3–11% на каждый поиск из-за вывода dLLM; опирается на безусловную языковую модель, генерирующую общий английский язык, и фокусируется исключительно на чрезмерном мышлении и поведении, связанном с истощением ресурсов. ## Результаты и доказательства - **Комплексный скор значимости:** 9.6 / 10.0 - **Уровень доказательности:** Теоретическое обоснование - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)