ChatGPT for Visually Impaired and Blind

2023

Толық мәтін Ашық қол жеткізу: Gold Метадеректер (CSL-JSON)
DOI 10.36227/techrxiv.22047080.v2
Деректер сенімділігі 70 орташа
Бұл баға қалай есептеледі

Ол жазбаның өзінің тексерілетін белгілерінен құралады: мақаланың DOI-і бар ма, оның деректерін қанша тәуелсіз дереккөз растады, міндетті өрістер толтырылған ба және соңғы растау қаншалықты жаңа. Дереккөздер арасындағы алшақтық пен идентификатордың болмауы бағаны төмендетеді. 80-нен бастап мән жазбаның қосымша тексерусіз жарияланғанын, 60-тан 79-ға дейін — оның сенімділігі төмен күйде жарияланғанын және қолмен тексеру ұсынылатынын білдіреді. Редактор қолмен тексерген жазбаны қайта есептеу 90-нан төмен түсірмейді. Бұл — мақаланың өзіне емес, ол туралы деректерімізге берілген баға.

Аңдатпа

The World Health Organization (WHO) reports that millions of individuals worldwide experience visual disabilities, which can have significant personal implications as more than 80% of our perception, cognition, learning, and daily activities rely on vision. As a result, people with visual impairments face challenges in education and professional settings due to inaccessible technologies. To address this issue, we introduce a speech-based assistive system that allows visually impaired and blind individuals to interact with ChatGPT through natural conversation. The system incorporates automatic speech recognition (ASR), text-to-speech (TTS) synthesis, and a messenger bot (Telegram) to create a seamless interface to ChatGPT. Through preliminary experiments, we have demonstrated the potential of this system as an assistive technology. We have made the source code publicly available at https://github.com/IS2AI/telegram-bot-chatgpt to encourage the development of assistive technologies for individuals with visual impairments.