Как перестать оплачивать бесконечные размышления искусственного интеллекта и перенести логику на обычный процессор
Большие языковые модели постоянно изобретают велосипед. Они смешивают решение задач с выполнением решений, что заставляет их решать каждую проблему с нуля. Мы показываем, что после того, как задача продумана, применение ее решения к новому экземпляру проблемы может быть выполнено очень эффективно и с небольшим участием языковых моделей. Мы представляем агентное кэширование рассуждений — метод создания надежных исполняемых ЦП кэшей агентных рассуждений (ARC) на основе трассировок рассуждений LLM. ARC демонстрируют производительность, не уступающую передовым LLM, в ряде сложных математических и научных задач, полностью объяснимы, постоянно обучаемы, устойчивы к входным возмущениям и 16-291x дешевле в вызове, чем исходная модель.
## В чем суть открытия Вместо того, чтобы платить гениальному математику каждый раз, когда вы корректируете размер порции рецепта, вы один раз записываете его алгебраические шаги и передаете формулу на простой карманный калькулятор. ## Как это устроено: принцип работы Когда пограничная модель решает проблему, модель-строитель анализирует след рассуждений, изолирует переменные параметры и разлагает базовую логику на модульные параметризованные вызовы Python, называемые семантическими функциями. Эти функции разрешают зависимости посредством семантического поиска естественного языка и небольших языковых моделей, позволяя детерминированному коду ЦП выполнять решение на новых полезных нагрузках без вызова пограничной модели. ## Что это меняет на практике Обеспечивает высокопроизводительные корпоративные агенты искусственного интеллекта и автоматизированные аналитические рабочие процессы, которые обрабатывают повторяющиеся шаблоны запросов с различной полезной нагрузкой, что позволяет сократить расходы на логические выводы более чем на 95% и одновременно перенести вычисления с дефицитных кластеров графических процессоров на стандартные конечные точки ЦП. ## Границы метода и риски Синтез кэша требует первоначальных затрат 12x–84x на первоначальную стоимость вывода, семантические функции с трудом могут обобщать фундаментально новые топологии проблем без человеческой или автоматической перекомпиляции, а открытые творческие задачи не могут быть разделены на жесткие эквирациональные программы. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** Golden label alignment accuracy, transcript answer alignment fidelity, perturbation robustness pass rate (phrasal, parametric, combined), per-query cost, build cost multiplier, savings multiplier - **Размер выборки / валидация:** N = 500 competition math problems (MATH-500), 3 AIME examination sets (2024-2026), GPQA Diamond subset, 8,000 GSM8K problems, MMLU-Pro subset, SciBench college-level science dataset - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)