Using item response theory in machine learning algorithms for student response data

2021

Закрытый доступ Метаданные (CSL-JSON)
DOI 10.1109/sist50301.2021.9465896
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

Item Response Theory (IRT) is widely used to solve the problem measure of the hidden capabilities of a student based on historical data. But these methods have their limitations, which do not allow to obtain accurate results. In the paper, we propose combining IRT with machine learning algorithm to improve accuracy. IRT calculates the general abilities of students and grouping of students by abilities, this information is an additional feature for the machine learning algorithm. Three methods of machine learning were compared: logistic regression, XGBoost, LightGBM. LithtGBM performed best on three recall, precision, f1 metrics. This method can be used for adaptive learning systems that will allow students to choose the correct and fastest direction in learning subjects.