Генерация и верификация заданий для лабораторных работ с вариантами по учебным дисциплинам IT-цикла с использованием больших языковых моделей

Abstract

Предложен алгоритм и прототип программного комплекса на базе больших языковых моделей для автоматизации процесса создания и верификации уникальных заданий для лабораторных работ по дисциплинам сферы информационных технологий. Основу решения составляет конвейер из трех агентов, обеспечивающих создание эталонного мастер-задания, параметрическое варьирование уникальных вариантов, контроль их сложности и автоматическое исправление ошибок. Проведена оценка эффективности и корректности работы решения. Результаты тестирования подтвердили высокое качество генерируемых заданий для лабораторных работ и соблюдение критериев уникальности вариантов заданий. Отмечено, что решение позволяет существенно сократить временные затраты преподавателей, сохраняя при этом педагогический контроль над содержанием учебного процесса.

An algorithm and a prototype software system based on large language models are proposed to automate the creation and verification of unique assignments for laboratory work in information technology disciplines. The solution is based on a three-agent pipeline that provides the generation of a reference master assignment, parametric variation of unique task instances, complexity control, and automatic error correction. An evaluation of the efficiency and correctness of the proposed solution was carried out. The testing results confirmed the high quality of the generated laboratory assignments and compliance with the requirements for the uniqueness of task variants. It was noted that the proposed solution makes it possible to significantly reduce instructors' time expenditure while preserving pedagogical control over the content of the educational process.