Тип публикации: доклад, тезисы доклада, статья из сборника материалов конференций
Конференция: Информатизация образования и методика электронного обучения: цифровые технологии в образовании; Красноярск; Красноярск
Год издания: 2026
Ключевые слова: automated writing assessment, large language models, comparative analysis, quality evaluation, educational technology, автоматизированная проверка письменных работ, большие языковые модели, сравнительный анализ, оценка качества, образовательные технологии
Аннотация: В статье представлен сравнительный анализ пяти LLM на корпусе из 210 студенческих работ с 140 ошибками. Оценка выполнялась по метрикам точности, полноты, точности обнаружения ошибок и коэффициенту избыточной коррекции. Модели показали общую точность 77-84%. Наилучшую педагогическую корректность обратной связи продемонстрировала модПоказать полностьюель Openchat-3.5-0106. The paper presents a comparative analysis of five LLMs was conducted on a corpus of 210 student essays with 140 errors. Evaluation used metrics of accuracy, recall, error detection precision, and overcorrection rate. Models achieved 77-84% accuracy but differed in the balance between error sensitivity and false positives. Openchat-3.5-0106 showed the best pedagogical feedback correctness.
Журнал: Информатизация образования и методика электронного обучения: цифровые технологии в образовании
Номера страниц: 11-15
Место издания: Красноярск