Development of A Model of Kazakh Sign Language Recognition Based on Deep Learning Method

2024

Закрытый доступ Метаданные (CSL-JSON)
DOI 10.1109/ubmk63289.2024.10773578
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

The purpose of this study is to analyse the effectiveness of deep neural networks for the task of recognition of Kazakh sign language. The study aims to use convolutional neural networks (CNNs) to process and classify images with gestures representing 42 letters of the Kazakh sign language. The developed model can recognise hand gestures in real time using a camera. Since the full-featured hand gesture recognition system in the field of artificial intelligence is still in the active development and research stage, the developed model is a key step in this direction. The results showed poor performance of the model in the current configuration, with low accuracy and completeness values for most classes, which may indicate that the dataset is unbalanced and the chosen model architecture is suboptimal. The study highlights the importance of further investigating methods for balancing classes and adapting the model architecture to improve its accuracy and reliability. In this study, a significant step was taken in the field of data collection and training for the recognition of gesture-based Kazakh language. Data augmentation using augmentation was performed.