Advances in speech emotion recognition using a CNN and gender-based segmentation framework with feature selection techniques

PeerJ Computer Science, 2026

Полный текст Открытый доступ: Gold Метаданные (CSL-JSON)
DOI 10.7717/peerj-cs.4016
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

Speech Emotion Recognition (SER) plays a critical role in affective computing and human-computer interaction. This study introduces a novel and fully automated SER framework that integrates Convolutional Neural Networks (CNNs) with advanced feature selection techniques to enhance classification accuracy while maintaining computational efficiency. Leveraging the librosa toolkit, five spectral feature types—including Mel-frequency Cepstral Coefficients (MFCCs), chroma, mel-spectrogram, spectral contrast, and tonnetz—were extracted, resulting in a 193-dimensional feature space. The Fisher score algorithm, combined with Recursive Feature Elimination (RFE), was used to identify the most discriminative features. Additionally, a gender-specific preprocessing pipeline and recognition have been integrated to mitigate bias and improve model robustness. The proposed model was evaluated on three benchmark datasets: RAVDESS, EMO-DB, and EMOVO, covering eight distinct emotional states. The results demonstrate strong generalization across languages and speaker identities, validated through both conventional and leave-one-out cross-validation settings. These findings underscore the effectiveness of combining deep learning with feature selection for scalable, accurate, and interpretable speech emotion recognition.