РАЗРАБОТКА СИСТЕМЫ РАСПОЗНАВАНИЯ КАЗАХСКОГО ЖЕСТОВОГО ЯЗЫКА С ИСПОЛЬЗОВАНИЕМ МЕТОДОВ КОМПЬЮТЕРНОГО ЗРЕНИЯ И ГЛУБОКОГО ОБУЧЕНИЯ

2025

Full text Open access: Gold Metadata (CSL-JSON)
DOI 10.51889/2959-5894.2025.92.4.016
Data confidence 70 medium
How this score is calculated

It is built from checkable properties of the record itself: whether the article has a DOI, how many independent sources confirmed its data, whether the required fields are filled in, and how recent the latest confirmation is. Disagreement between sources and a missing identifier lower it. A value of 80 or above means the record was published without further checking; 60 to 79 means it is published at reduced confidence, with a manual check advisable. A record verified by an editor by hand is never pushed below 90 by a recalculation. This scores our data about the article, not the article itself.

Abstract

В статье рассматривается разработка системы распознавания казахского жестового языка и повышение её эффективности. Актуальной задачей является создание системы, способной распознавать казахский жестовый язык в режиме реального времени с целью облегчения коммуникации среди людей с нарушениями слуха и речи. В предлагаемом методе используется сверточная нейронная сеть YOLOv5 и библиотека Mediapipe, обеспечивающие высокоточное распознавание жестов в реальном времени. Для анализа распознанных знаков и их семантической обработки применяется сеть долговременной и кратковременной памяти (LSTM). Разработанная система позволяет анализировать движения рук пользователя в реальном времени и формировать осмысленные предложения из распознанных жестов. Кроме того, для удобства представления результатов пользователю был разработан веб-сайт на основе фреймворка Django. Экспериментальные результаты показали, что предложенная система обеспечивает высокую точность и надежность при распознавании казахского жестового языка в реальном времени.