РАЗРАБОТКА СИСТЕМЫ РАСПОЗНАВАНИЯ КАЗАХСКОГО ЖЕСТОВОГО ЯЗЫКА С ИСПОЛЬЗОВАНИЕМ МЕТОДОВ КОМПЬЮТЕРНОГО ЗРЕНИЯ И ГЛУБОКОГО ОБУЧЕНИЯ

2025

Полный текст Открытый доступ: Gold Метаданные (CSL-JSON)
DOI 10.51889/2959-5894.2025.92.4.016
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

В статье рассматривается разработка системы распознавания казахского жестового языка и повышение её эффективности. Актуальной задачей является создание системы, способной распознавать казахский жестовый язык в режиме реального времени с целью облегчения коммуникации среди людей с нарушениями слуха и речи. В предлагаемом методе используется сверточная нейронная сеть YOLOv5 и библиотека Mediapipe, обеспечивающие высокоточное распознавание жестов в реальном времени. Для анализа распознанных знаков и их семантической обработки применяется сеть долговременной и кратковременной памяти (LSTM). Разработанная система позволяет анализировать движения рук пользователя в реальном времени и формировать осмысленные предложения из распознанных жестов. Кроме того, для удобства представления результатов пользователю был разработан веб-сайт на основе фреймворка Django. Экспериментальные результаты показали, что предложенная система обеспечивает высокую точность и надежность при распознавании казахского жестового языка в реальном времени.