АНАЛИЗ НАУЧНЫХ ТЕКСТОВ НА ОСНОВЕ ЯЗЫКОВЫХ МОДЕЛЕЙ АЛГОРИТМАМИ РАСПРЕДЕЛЕННОЙ ОБРАБОТКИ

2023

Полный текст Открытый доступ: Hybrid Метаданные (CSL-JSON)
DOI 10.58805/kazutb.v.4.21-220
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

Статья анализирует проблемы, связанные с обработкой больших объемов текстовых данных, таких как научные статьи, и обсуждает возможности применения распределенных систем обработки данных для повышения эффективности анализа. В частности, авторы статьи изучают использование языковых моделей, таких как -граммы и рекуррентные нейронные сети, для извлечения смысла и классификации научных текстов. Статья представляет алгоритмические подходы и методы, основанные на распределенной обработке, и описывает возможности использование языковых моделей и алгоритмов распределенной обработки. В целом, предлагается новый подход к анализу научных текстов, основанный на использовании языковых моделей и фреймворков распределенной обработки данных.