Аңдатпа
В статье рассматривается применение системы распознавания жестов рук, основанной на комбинированном использовании глубинного сенсора RealSense D435, web-камеры для захвата жеста и предварительно обученной сверточной нейронной сети с архитектурой VGG-16 для выделения признаков и классификации объектов, для взаимодействия с голосовым помощником, устройством IoT и человеко-компьютерным интерфейсом. Приведены образцы распознаваемых системой жестов и блок-схема алгоритма работы системы. Также приведена программная реализация модуля, предназначенного для взаимодействия с устройствами IoT и человеко-компьютерным интерфейсом на языке Python 3.11. Приведены примеры использования системы пользователем для взаимодействия с Yandex Alice, управления презентацией PowerPoint и для управления работой контроллера, который включает и выключает светодиод.