АНАЛИЗ НАУЧНЫХ ТЕКСТОВ НА ОСНОВЕ ЯЗЫКОВЫХ МОДЕЛЕЙ АЛГОРИТМАМИ РАСПРЕДЕЛЕННОЙ ОБРАБОТКИ

2023

Full text Open access: Hybrid Metadata (CSL-JSON)
DOI 10.58805/kazutb.v.4.21-220
Data confidence 70 medium
How this score is calculated

It is built from checkable properties of the record itself: whether the article has a DOI, how many independent sources confirmed its data, whether the required fields are filled in, and how recent the latest confirmation is. Disagreement between sources and a missing identifier lower it. A value of 80 or above means the record was published without further checking; 60 to 79 means it is published at reduced confidence, with a manual check advisable. A record verified by an editor by hand is never pushed below 90 by a recalculation. This scores our data about the article, not the article itself.

Abstract

Статья анализирует проблемы, связанные с обработкой больших объемов текстовых данных, таких как научные статьи, и обсуждает возможности применения распределенных систем обработки данных для повышения эффективности анализа. В частности, авторы статьи изучают использование языковых моделей, таких как -граммы и рекуррентные нейронные сети, для извлечения смысла и классификации научных текстов. Статья представляет алгоритмические подходы и методы, основанные на распределенной обработке, и описывает возможности использование языковых моделей и алгоритмов распределенной обработки. В целом, предлагается новый подход к анализу научных текстов, основанный на использовании языковых моделей и фреймворков распределенной обработки данных.