Prompt-Constrained Transformer Analytics for Low-Resource Script Conversion in Kazakh Language Processing

2025

Толық мәтін Ашық қол жеткізу: Hybrid Метадеректер (CSL-JSON)
DOI 10.63646/jaiaa.2025.030403
Деректер сенімділігі 70 орташа
Бұл баға қалай есептеледі

Ол жазбаның өзінің тексерілетін белгілерінен құралады: мақаланың DOI-і бар ма, оның деректерін қанша тәуелсіз дереккөз растады, міндетті өрістер толтырылған ба және соңғы растау қаншалықты жаңа. Дереккөздер арасындағы алшақтық пен идентификатордың болмауы бағаны төмендетеді. 80-нен бастап мән жазбаның қосымша тексерусіз жарияланғанын, 60-тан 79-ға дейін — оның сенімділігі төмен күйде жарияланғанын және қолмен тексеру ұсынылатынын білдіреді. Редактор қолмен тексерген жазбаны қайта есептеу 90-нан төмен түсірмейді. Бұл — мақаланың өзіне емес, ол туралы деректерімізге берілген баға.

Аңдатпа

This article develops a prompt-constrained Transformer analytics framework for low-resource script conversion in Kazakh language processing. Kazakh is written across Arabic-based, Cyrillic-based, and Latin-based orthographies, and conversion among these scripts is complicated by non-one-to-one grapheme mappings, vowel harmony, consonant alternation, agglutinative morphology, regional lexical preferences, and large numbers of loanwords. Instead of treating script conversion as a purely mechanical transliteration task, the proposed framework treats it as a constrained sequence analytics problem in which lexical prompts provide soft but explicit guidance to a Transformer encoder-decoder model. The framework integrates a multiscript lexical prompt bank, morphological screening, prompt-conditioned attention, and post-conversion error analytics. A controlled benchmark design is introduced to evaluate six conversion directions across general news, educational text, public-service notices, and technology-related terminology. The results indicate that prompt constraints reduce character and word error rates relative to attention-only baselines, with the greatest gains in loanwords, proper names, and morphologically inflected forms. The article further analyzes the trade-offs among conversion accuracy, robustness, latency, explainability, and data governance. The findings suggest that prompt-constrained analytics offers a practical pathway for low-resource language technologies because it combines neural contextual learning with auditable linguistic knowledge. The study contributes to artificial intelligence analytics by showing how structured prompts can turn scarce linguistic resources into deployable conversion intelligence for multilingual digital services.