MACHINE LEARNING STRATEGIES AND ALGORITHMS FOR ENHANCING REAL-TIME DATA PROCESSING IN DYNAMIC AND BIG DATA SYSTEMS

2024

Полный текст Открытый доступ: Hybrid Метаданные (CSL-JSON)
DOI 10.52167/1609-1817-2024-134-5-278-291
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

This systematic review article investigated machine learning strategies and algorithms designed to enhance real-time data processing in dynamic and big data environments. As data complexity and volume increased, the need for scalable, adaptable, and computationally efficient solutions became more pressing. Despite significant advances, gaps persisted in handling heterogeneous data sources, ensuring real-time adaptability, and addressing privacy concerns. This article systematically assessed the effectiveness of machine learning models, including supervised, unsupervised, and reinforcement learning, across various dynamic systems. Based on the findings from the literature review, a possible framework was developed, outlining critical processes involved in real-time machine learning, such as data ingestion, feature engineering, model inference, and continuous monitoring. The framework demonstrated methods to improve scalability and performance using cloud computing, edge solutions, and automated model retraining. The findings suggested that emerging trends such as federated learning, ethical AI, and neurosymbolic AI offered promising solutions to unresolved challenges. This article highlighted the importance of continued research to develop robust, secure, and adaptable machine learning frameworks capable of meeting the demands of real-time, high-velocity data processing in increasingly complex environments.