Двустороннее хэширование устраняет скрытое дублирование в авто-агентах
Службы агентного искусственного интеллекта (ИИ) чередуют создание больших языковых моделей (LLM) с выполнением внешних инструментов и все больше полагаются на рабочие процессы на основе поиска, которые неоднократно возвращаются к общим состояниям рассуждений и вычислениям. Эти шаблоны создают существенную избыточность выходных данных инструментов, ответов LLM и префиксов «ключ-значение» (KV), однако существующие обслуживающие системы в первую очередь оптимизируют префиксы общих подсказок, в то время как наивное кэширование с вводом ключей небезопасно, когда одинаковые запросы производят разные выходные данные. Мы представляем TwinHash, унифицированную архитектуру управления объектами, которая назначает каждому объекту хеш-ключ на входной стороне для распознавания повторяющихся запросов и отпечаток содержимого на выходной стороне для проверки и определения местоположения сохраненного состояния, дополненную средствами защиты повторного использования для конкретного типа, которые сохраняют корректность и разнообразие ответов. Таблица идентификации программных объектов поддерживает многократно используемые объекты в запросах и траекториях, а таблица размещения аппаратных объектов отслеживает их местонахождение на иерархических уровнях памяти, так что вытесненное состояние можно извлечь, а не пересчитать. В семи платформах агентов и пяти наборах тестов повторное использование больше соответствует структуре рабочего процесса, чем идентичности тестов. TwinHash обслуживает до 81% выходных данных инструмента везде, где повторяются детерминированные чтения инструмента, и до 92% ответов LLM в платформах на основе поиска. Извлечение удаленного KV-префикса из DRAM снижает TTFT до 5.6x на Qwen3-32B, причем больший выигрыш прогнозируется для моделей с большей плотностью. В рамках основанных на поиске фреймворков TwinHash сокращает время непрерывной работы настенных часов до 87% и измеряет энергопотребление задач до 81% по сравнению с базовым уровнем, кэшированным в префиксе, а ограничение обслуживания каждого ключа контролирует компромисс между качеством и повторным использованием в адаптивном поиске. Эти результаты показывают, что унифицированное управление идентификацией, безопасностью и размещением может превратить структурную избыточность в новых агентских рабочих процессах в существенное повышение эффективности обслуживания.
## В чем суть открытия Механизм TwinHash подобен умном офисном секретаре, который сохраняет блокировку ввода и отпечаток выходного документа, чтобы мгновенно передать выполненную работу вместо того, чтобы заставлять экспертов повторно выполнять идентичные вычисления. ## Как это устроено: принцип работы TwinHash разделяет управление идентификацией на 128-битный ключ BLAKE2b на входной стороне, обрабатывающий канонизированные дескрипторы запросов, и отпечаток контента на выходной стороне для проверки физических данных. Таблица идентификации объектов программного обеспечения сопоставляет подписи с сохраненными результатами, а таблица размещения объектов аппаратного обеспечения отслеживает физические адреса на уровнях памяти HBM, DRAM, CXL и NVMe для извлечения вытесненного состояния без повторного вычисления. ## Что это меняет на практике Обеспечивает коммерческое развертывание агентного ИИ на основе поиска и моделей масштабирования во время вывода при значительном сокращении вычислительных затрат, сокращении задержки обслуживания до 87% и энергопотребления графического процессора до 81%. ## Границы метода и риски Требуются сигналы эпохи состояния каждого ресурса, чтобы избежать обслуживания устаревших данных в изменяемых внешних системах, предлагается минимальная экономия для линейных однотраекторных рабочих процессов и полагается на аппаратные конструкции OPT, проверенные с помощью моделирования, а не физического изготовления ASIC. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** End-to-end latency reduction (up to 87%), Task energy reduction (up to 81%), Tool output reuse rate (up to 81%), LLM response reuse rate (up to 92%), TTFT speedup (up to 5.6x) - **Размер выборки / валидация:** N = 7 agent frameworks, 5 benchmark suites, evaluated on Qwen3-14B and Qwen3-32B models across multiple task runs