Нейросети научили мгновенно находить точные ответы в гигантских базах знаний
Хотя языковые модели стали значительно более функциональными, поиск по-прежнему во многом зависит от лексического соответствия или сходства в фиксированных пространствах встраивания. Это создает асимметрию возможностей: то, что ретривер не может найти, не может восстановить даже самый мощный генератор. Мы предлагаем DecisionRAG, который позволяет использовать возможности предварительно обученных языковых моделей для поиска с использованием моделей принятия решений, которые совместно оценивают ветви-кандидаты за один прямой проход, без генерации каких-либо токенов, и показывают, что оценка кандидатов в общем контексте делает их оценки релевантности сопоставимыми. Подобно человеку, просматривающему библиотеку, DecisionRAG перемещается по внутренней структуре корпуса от широких тем до отдельных отрывков, решая на каждом уровне, какие ветви стоит изучить. Без обучения конкретному заданию или средства извлечения первого уровня DecisionRAG превосходит плотный поиск с реранкером 8B на 13,8 балла R@1 по MultiDoc2Dial и на 17,4 балла Hit@1 по естественным вопросам. По четырем тестам, включая корпус из 2,68 миллиона параграфов Википедии, поиск занимает всего 0,7–1,8 секунды на каждый запрос.
## В чем суть открытия Почему современные LLM по-прежнему терпят неудачу, когда поиск становится узким местом, и как негенеративные модели принятия решений могут исключить? ## Как это устроено: принцип работы Это создает асимметрию возможностей: то, что ретривер не может найти, не может восстановить даже самый мощный генератор. Мы предлагаем DecisionRAG, который позволяет использовать возможности предварительно обученных языковых моделей для поиска с использованием моделей принятия решений, которые совместно оценивают ветви-кандидаты за один прямой проход, без генерации каких-либо токенов, и показывают, что оценка кандидатов в общем контексте делает их оценки релевантности сопоставимыми. ## Что это меняет на практике Обеспечивает высокоточный поиск корпоративных документов за доли секунды и многоповоротные диалоговые системы по миллионам документов с 34x-145x с меньшей задержкой и меньшими затратами на запрос по сравнению с агентным поиском LLM. ## Границы метода и риски Сокращение является необратимым, то есть доказательства, потерянные на верхних уровнях, не могут быть восстановлены без гибридных плотных резервных копий. Это также во многом зависит от четкой иерархической структуры или качественной кластеризации. ## Результаты и доказательства - **Комплексный скор значимости:** 9.6 / 10.0 - **Уровень доказательности:** Теоретическое обоснование