Рой агентов искусственного интеллекта обнаруживает научные прорывы в непрерывном скрытом пространстве без написания текста
Эволюционный поиск под руководством LLM использует агенты искусственного интеллекта для улучшения программ для решения математических и вычислительных задач путем итеративного уточнения решений и комбинирования методов с высокой оценкой. Однако этот процесс часто идет медленно, поскольку LLM генерирует длинную текстовую цепочку мыслей для каждого раунда и должен повторять это поколение много раз, чтобы поддерживать разнообразие населения. Мы представляем SwarmEvolve, структуру, в которой сотни недорогих агентов за раунд работают в роях, рассуждают в скрытом пространстве без декодирования в текст и обмениваются информацией, передавая кэши KV. Каждый рой изучает проблему под разным углом. Фильтр новизны сохраняет наиболее четкие идеи агентов, напрямую измеряя расстояния между векторами скрытого состояния агентов. Пересечение идей происходит естественным образом в скрытом пространстве, поскольку агент суммирования получает объединенные кэши KV всех членов роя. По 21 задаче в области математических открытий и научных вычислений SwarmEvolve получает самый высокий средний балл, и ему требуется в среднем всего от 3 до 8 минут, чтобы достичь лучших результатов, которые другие современные фреймворки достигают за 60 минут. По ряду проблем SwarmEvolve с Qwen3 8B улучшает решения, которые AlphaEvolve впервые нашла с помощью передовых LLM. Наша работа показывает, что рои агентов, которые общаются в скрытом пространстве, предлагают быстрый и недорогой подход к программному поиску научных проблем.
## В чем суть открытия SwarmEvolve ускоряет научные открытия, основанные на искусственном интеллекте, запуская сотни недорогих агентов, которые рассуждают в непрерывных скрытых векторных пространствах и совместно используют KV-кеши вместо медленной записи длинных цепочек текста. ## Как это устроено: принцип работы Вместо поэтапной генерации текста 450 скрытых агентов за раунд выполняют 40 шагов векторного рассуждения в пространстве внедрения. Фильтр новизны выбирает 30 наиболее различных векторов скрытого состояния, используя косинусное расстояние, а агент сумматора объединяет их KV-кэши для декодирования одной оптимизированной программы. ## Что это меняет на практике Позволяет исследователям выполнять крупномасштабный автоматический поиск решателей PDE, математических конструкций и научных алгоритмов на одном графическом процессоре за считанные минуты, а не часы, демократизируя передовые исследования ИИ. ## Границы метода и риски Требует, чтобы все агенты и сумматоры использовали одну и ту же архитектуру LLM, поддерживают только стандартные модели внимания, а объем памяти для кэшей KV растет линейно с увеличением количества агентов. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** Average score across 21 math and scientific computing problems, total programs generated per hour, and wall-clock minutes to reach baseline scores. - **Размер выборки / валидация:** N = 21 benchmark problems across 5 domains, tested with 3 LLMs (Qwen3 8B, 14B, 32B-FP8) across 3 random seeds. - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)