Тип публикации: доклад, тезисы доклада, статья из сборника материалов конференций
Конференция: Информатизация образования и методика электронного обучения: цифровые технологии в образовании; Красноярск; Красноярск
Год издания: 2026
Ключевые слова: automated essay scoring, denotative analysis, graph text representation, interpretability, natural language processing, автоматизированная оценка эссе, денотативный анализ, графовое представление текста, интерпретируемость, обработка естественного языка
Аннотация: Рассматривается задача автоматизированной содержательной проверки эссе на соответствие заданным критериям. Показано, что современные системы оценки эссе (AES) обладают высокой точностью, но низкой интерпретируемостью и слабо применимы к русскоязычным текстам. Предложен интерпретируемый алгоритм на основе денотативного анализа. Для Показать полностьювычисления оценки текст представляется графом смысловых единиц с типизированными связями и сравнивается с эталонным графом по трём метрикам - полноте, структурной точности и соответствию теме. Апробация на 15 эссе показала среднее отклонение от экспертной оценки 0,4 балла The paper addresses automated content-based assessment of essays against given criteria. Modern automated essay scoring (AES) systems achieve high accuracy but suffer from low interpretability and limited applicability to Russian-language texts. An interpretable algorithm based on denotative analysis is proposed: a text is represented as a graph of meaning units with typed relations and compared with a reference graph by three metrics - completeness, structural accuracy, and topic relevance. Testing on 15 essays yielded a mean deviation of 0.4 points from expert scores.
Журнал: Информатизация образования и методика электронного обучения: цифровые технологии в образовании
Номера страниц: 16-20
Место издания: Красноярск