Цель ВКР: Данная работа направлена на разработку алгоритмов распознавания жестов с точностью не менее 95%. В этой работе изучаются имеющиеся соответствующие данные, а также анализируются существующие методы и модели. Создан модель жестов. Выбрана модель нейронной сети и уточнена ее. Разработана обучающая выборка, обучена и протестирована нейронная сеть. Проведены экспериментальные исследования, сделан анализ результатов, подведены итоги. Метод и результаты ВКР: Эта работа основана на методах сверточной нейронной сети, остаточной нейронной сети и трансферного обучения. Сначала в ResNet50 были внесены некоторые коррективы в соответствии с требованиями задачи, затем были проанализированы и смоделированы жесты, а затем обучена и протестирована модель, и в итоге было распознано 9 жестов с точностью более 95%. Область применения результатов ВКР: Применяется в области робототехники (реализация удаленной синхронной работы), виртуальной реальности (приближение виртуальной реальности к реальности), помощи глухим людям в переключении языка жестов, области умного дома (переключение каналов смарт-телевизоров, перемещение умных инвалидных колясок) и так далее.

The purpose of the WRC: This work is aimed at developing gesture recognition algorithms with an accuracy of at least 95%. This work examines available relevant data and analyzes existing methods and models. A gesture model has been created. A neural network model was chosen and refined. A training sample has been developed, a neural network has been trained and tested. Experimental studies have been carried out, an analysis of the results has been made, and the results have been summed up. Method and results of WRC: This work is based on the methods of convolutional neural network, residual neural network and transfer learning. First, some adjustments were made in ResNet50 according to the requirements of the task, then the gestures were analyzed and modeled, and then the model was trained and tested, and as a result, 9 gestures were recognized with an accuracy of more than 95%. Scope of WRC results: Applied in the field of robotics (implementation of remote synchronous work), virtual reality (approximation of virtual reality to reality), helping deaf people to switch sign language, smart home (switching smart TV channels, moving smart wheelchairs) and etc.

• 封面
• ВКР_Ху Хаожань.pdf