Multilevel Annotation Model for Detecting Fake News in Kazakh-Language Media

2025

Жабық қол жеткізу Метадеректер (CSL-JSON)
DOI 10.1109/ubmk67458.2025.11206945
Деректер сенімділігі 70 орташа
Бұл баға қалай есептеледі

Ол жазбаның өзінің тексерілетін белгілерінен құралады: мақаланың DOI-і бар ма, оның деректерін қанша тәуелсіз дереккөз растады, міндетті өрістер толтырылған ба және соңғы растау қаншалықты жаңа. Дереккөздер арасындағы алшақтық пен идентификатордың болмауы бағаны төмендетеді. 80-нен бастап мән жазбаның қосымша тексерусіз жарияланғанын, 60-тан 79-ға дейін — оның сенімділігі төмен күйде жарияланғанын және қолмен тексеру ұсынылатынын білдіреді. Редактор қолмен тексерген жазбаны қайта есептеу 90-нан төмен түсірмейді. Бұл — мақаланың өзіне емес, ол туралы деректерімізге берілген баға.

Аңдатпа

With the exponential growth of disinformation in digital media, especially in multilingual societies, there is an increasing need to develop formalized annotation models that can accurately reflect both the content and the pragmatic structure of fake news. The present study presents a multi-level annotation scheme focused on Kazakh language media content and aimed at improving the interpretability and automatibility of fake news detection processes. Unlike the dominant binary approaches (REAL/FAKE), the developed model includes nine key categories (including CLAIM, EVIDENCE, SOURCE, AUTHOR_INTENT, TARGET_AUDIENCE, etc.) and twenty-three subtypes reflecting manipulative techniques, author's motivations, and the typology of target audiences. The manually annotated corpus of 5,000 texts covers news reports in Kazakh and demonstrates high values of inter - editorial agreement (k = 0.72-0.89). The annotation methodology is implemented in Label Studio with a further formalized description of the semantic relationships between entities. The results of the study emphasize both the scientific novelty of the proposed scheme and its applied significance in the tasks of constructing explicable models in the field of media literacy, information security and linguistically adapted NLP.