Applying LLMs like ChatGPT, Deepseek, Grok for student work evaluation

2025

Полный текст Открытый доступ: Hybrid Метаданные (CSL-JSON)
DOI 10.54596/10.54596/2958-0048-2025-2-220-230
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

The article discusses the possibilities of using large language models (LM), such as ChatGPT, Deep Seek and Grok, in the tasks of evaluating student papers. The author conducts a qualitative analysis of the results obtained using ChatGPT, in comparison with teaching assessments, with an emphasis on identifying the strengths and weaknesses of the automated approach. The potential advantages of using LLM are discussed – processing speed, compliance with criteria, scalability – as well as limitations associated with evaluating creativity and depth of analysis. Special attention is paid to the applicability of various models depending on the type of assignment (text, code) and the specifics of the discipline. The work is of a review and analytical nature and can serve as a starting point for further research in the field of digitalization of educational assessment and integration of LLM into the educational process.