A SYSTEMATIC REVIEW OF EXISTING TOOLS TO AUTOMATED PROCESSING SYSTEMS FOR KAZAKH LANGUAGE

2024

Закрытый доступ Метаданные (CSL-JSON)
DOI 10.51889/2959-5894.2024.87.3.009
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

The development of automated systems for the Kazakh language has gained significant momentum in recent years, driven by the growing need for natural language processing (NLP) tools tailored to underrepresented languages. This systematic review aims to critically evaluate the existing observational tools and methodologies used in building and improving automated systems for learning the Kazakh language. Through a comprehensive analysisof scientific literature, technical reports, and practical implementations, this review identifies key trends, challenges, and advances in the field. The review highlights various linguistic complexities unique to the Kazakh language, such as its agglutinative nature, vowel harmony, and rich morphological structure, which pose unique challenges to developers. Additionally, the study examines the effectiveness of modern tools, including tokenization, part-of-speech tagging, parsing, and machine translation,in processing Kazakh text. The findings show that despite significant progress, there are still significant gaps in the availability and accuracy of these tools, especially when compared to those available for more widely spoken languages. The review concludes with recommendations for future research and development, highlighting the need for more robust datasets, improved algorithms, and collaborative efforts to further advance Kazakh language data science.