Как найти скрытые поломки в архитектуре программы еще до того, как они обрушат продакшен
Анализ влияния изменений (CIA) помогает разработчикам идентифицировать объекты кода, на которые повлияли их первоначальные изменения. Хотя для ЦРУ было предложено несколько подходов, они все еще имеют проблемы либо с низкой точностью, либо с низкой полнотой, что приводит к увеличению ручных усилий разработчиков по проверке результатов. Более того, ограничения в используемых наборах данных и экспериментальных установках могут исказить результаты, полученные многими подходами ЦРУ. В этой статье мы сначала устраняем ограничения набора данных, вручную помечая 1931 измененный объект кода, возникший в результате 263 коммитов 22 проектов Java с открытым исходным кодом. Далее мы представляем два варианта katIA, нашего подхода к анализу воздействия изменений кода, который сочетает в себе статический анализ воздействия с возможностями рассуждения больших языковых моделей (LLM). В первом варианте используется одна подсказка (katIA-SP) для уточнения исходного набора статических воздействий, а во втором варианте используются три специализированных агента (katIA-MA). Оценка с использованием нашего тщательно подобранного набора данных показывает, что katIA-SP с Gemini 2.5 Flash достигла показателя F1 22.4% при сопоставлении затронутых объектов по их полным именам (FQN) и 27.0% при сопоставлении их по классам и именам объектов (CE). Последний показывает улучшение на 2,0 процентных пункта по сравнению с современным состоянием. Этот показатель дополнительно улучшен благодаря katIA-MA, который с использованием Gemini 2.5 Flash дает соответствующий FQN-показатель F1 29.1% и соответствующий CE F1-показатель 33.3%. Хотя эти улучшения достигаются за счет увеличения среднего времени генерации с 0,570 с до 11,214 с и среднего использования токенов с 1235 до 6462 токенов, улучшенная производительность оправдывает дополнительные затраты. Сравнение трех LLM, использующих katIA-SP, показало, что Gemini 2.5 Flash является наиболее последовательной моделью. Эти результаты показывают, что сочетание статического анализа воздействия с уточнением на основе LLM, особенно с многоагентным вариантом, может улучшить анализ влияния изменений кода.
## В чем суть открытия Исправление ошибки в программном обеспечении похоже на замену шестерни в гигантских механических часах: вы не можете просто смотреть на соприкасающиеся шестеренки, вам нужен опытный часовщик, чтобы предвидеть, какие далекие колеса выйдут из-под контроля. ## Как это устроено: принцип работы Платформа использует структуру компилятора Spoon для извлечения непосредственных вызывающих объектов, вызываемых объектов и ссылок на поля измененного кода в статический набор кандидатов. Затем три специализированных агента LLM последовательно оценивают контекст ошибки, фильтруют структурно связанный, но функционально незатронутый код и форматируют проверенный список последствий. ## Что это меняет на практике Интегрируется в конвейеры запросов на включение Git, чтобы автоматически отмечать затронутые методы и запускать выборочные регрессионные тесты перед слиянием. ## Границы метода и риски Игнорирует динамическое отражение, косвенные транзитивные зависимости и файлы конфигурации, отличные от Java; в целом F1 остается ограниченным ниже 35%. ## Результаты и доказательства - **Комплексный скор значимости:** 9.5 / 10.0 - **Уровень доказательности:** программный бенчмарк и верификация - **Бенчмарки и прирост:** Macro-averaged Precision, Recall, and F1-score across FQN-matching and CE-matching - **Размер выборки / валидация:** N = 263 commits across 22 open-source Java projects, 1,931 labeled code entities - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)