Understanding Authorship Attributions of Kazakh Texts via Distance Measures

2022

Закрытый доступ Метаданные (CSL-JSON)
DOI 10.1109/sist54437.2022.9945707
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

Author identification of a given text is an important issue to be solved or improved in Natural Language Processing field (NLP) and has many useful applications like plagiarism detection and forensic analysis. However, there is little to no information about effectiveness of authorship identification methods in application to Kazakh language. This paper is then dedicated to implementing and reviewing accuracy of several empirical language-based authorship identification techniques. For purposes of this paper, a new dataset was assembled, which consisted of texts from 11 different authors, including, but not limited to, Abai Qunanbaiuly, Muhtar Ayezov, and Saken Seifyllin. All documents in the corpus were pre-processed, tokenized, and split into samples containing 5,000 n-grams of size 1. Reviewed methods have included Chi-Squared Measure by Kilgariff and Delta Method by Burrows, as well as its derivatives and variants. Experimentally, we show that methods which are based on Burrows' Delta measure produce some promising results when applied to texts written in Kazakh language.