Big data processing technology in a distributed information system

2021

Полный текст Открытый доступ: Hybrid Метаданные (CSL-JSON)
DOI 10.51301/vest.su.2021.i2.35
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

Digital technologies exist in almost all areas of human life. The volume of data recorded in global warehouses increases every second, which means that the conditions for storing information change at the same rate, and new opportunities must appear to increase its volume. The introduction of big data technology is a new step in scientific and technical development in various sectors of society. Despite the fact that big data technology is at the initial stage of development, it has achieved high results in the field of Information Technology. There are no universal methods for processing big data, but they allow you to use different methods to partially solve the problem. Successful use of Big Data Increases work efficiency several times. Currently, Big Data Processing is focused on the effectiveness of using new technologies. The article discusses methods and approaches to working with big data, emerging complex problems and the importance of using big data in a distributed Information System, Functional Requirements for a distributed information system that supports scientific and educational activities, and the big data architecture that supports scientific and educational activities of a distributed information system.