Multilingual Speech Command Recognition for Voice Controlled Robots and Smart Systems

2025

Полный текст Открытый доступ: Gold Метаданные (CSL-JSON)
DOI 10.1109/iccar64901.2025.11073019
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

Speech Command Recognition (SCR) has many applications in smart home systems, voice-controlled robots, and voice assistants. The modern SCR systems employ deep learning models trained on speech command datasets. Nowadays, the Google Speech Commands (GSC) dataset serves as a benchmark for training and evaluating SCR models, but it only includes English commands. In this work, we introduce an equivalent of the GSC for the Kazakh, Tatar, and Russian languages. We collected the dataset via a Telegram bot in real-world settings. The dataset includes the same 35 commands as GSC and contains 3,623 utterances for Kazakh, 3,547 for Tatar, and 1,625 for Russian. We trained and evaluated both monolingual and multilingual SCR models. The experimental results show that the multilingual model outperforms the monolingual models with an accuracy of 98.57%, 99.33%, 96.86%, and 97.33% on the test sets of the Kazakh, Tatar, Russian datasets and GSC, respectively. Furthermore, we deployed the model on an NVIDIA Jetson Orin NX 16GB, achieving an average inference time of 0.008 seconds. This performance makes it suitable for real-time applications. We have made the dataset, source code, and pretrained models publicly available to encourage further research in this area.