EVALUATION OF TEMPORAL STABILITY OF EMOTIONS IN MULTIMODAL SIGNALS

2026

Толық мәтін Ашық қол жеткізу: Hybrid Метадеректер (CSL-JSON)
DOI 10.51885/3134-8025_jics_2026_2_8
Деректер сенімділігі 70 орташа
Бұл баға қалай есептеледі

Ол жазбаның өзінің тексерілетін белгілерінен құралады: мақаланың DOI-і бар ма, оның деректерін қанша тәуелсіз дереккөз растады, міндетті өрістер толтырылған ба және соңғы растау қаншалықты жаңа. Дереккөздер арасындағы алшақтық пен идентификатордың болмауы бағаны төмендетеді. 80-нен бастап мән жазбаның қосымша тексерусіз жарияланғанын, 60-тан 79-ға дейін — оның сенімділігі төмен күйде жарияланғанын және қолмен тексеру ұсынылатынын білдіреді. Редактор қолмен тексерген жазбаны қайта есептеу 90-нан төмен түсірмейді. Бұл — мақаланың өзіне емес, ол туралы деректерімізге берілген баға.

Аңдатпа

This paper proposes a methodological approach for evaluating the temporal stability of emotional states in multimodal data. Unlike previous studies, we introduce a multi-level formalization (signal →function →latent space →prediction) and a set of indicators including the number of class switches, episode duration, and the Hurst exponent. Stability is assessed at the level of trajectories in a polar space interpreted on the basis of Plutchik’s model. The study proposes a system of metrics describing temporal stability and provides a comparative analysis of these metrics across several multimodal architectures. The evaluation protocol includes speaker-independent splits, standard metrics (F1/UAR, CCC/MAE), and temporal stability indicators. As an addi-tional validation step, a text-only pilot experiment was conducted on a balanced small subset of the MELD dataset. The proposed evaluation approach makes it possible to characterize the temporal stability properties of models more accurately. The practicalvalue of the work lies in improving the predictability and interpretability of behavior in human-computer interaction systems and assistive technologies.