АНАЛИЗ ФАКТОРОВ, ВЛИЯЮЩИХ НА СМЫСЛОВЫЕ ИСКАЖЕНИЯ ПРИ ГЕНЕРАЦИИ ПРОГРАММНОГО КОДА С ПОМОЩЬЮ БОЛЬШИХ ЯЗЫКОВЫХ МОДЕЛЕЙ

Аннотация

В настоящее время расширяется практика автоматической генерации программного кода большими языковыми моделями (LLM) по требованиям, описанным на естественном языке. В общем случае код, сгенерированный LLM, содержит смысловые искажения и дефекты, обусловленные проникновением в запросы к LLM неполных, недостаточно детализированных или искаженных представлений разработчиков о создаваемой программной системе и отдельных ее частях. В настоящей работе на концептуальном уровне проводится анализ факторов, влияющих на эффективность запросов к LLM и позволяющих смещать результаты генерации кода в сторону более точного соответствия требованиям и спецификациям программной системы. Для этого мы используем формализованную высокоуровневую модель, позволяющую связывать смысловые аспекты запросов и результатов на основе понятий сходства между их морфологическими структурами.