Детальная информация

Название: Система распознавания жестов для проведения презентаций: выпускная квалификационная работа бакалавра: направление 09.03.04 «Программная инженерия» ; образовательная программа 09.03.04_01 «Технология разработки и сопровождения качественного программного продукта»
Авторы: Загородний Георгий Романович
Научный руководитель: Малеев Олег Геннадьевич
Другие авторы: Локшина Екатерина Геннадиевна
Организация: Санкт-Петербургский политехнический университет Петра Великого. Институт компьютерных наук и технологий
Выходные сведения: Санкт-Петербург, 2021
Коллекция: Выпускные квалификационные работы; Общая коллекция
Тематика: сверточные нейронные сети; распознавание изображений; трекинг объектов; управление жестами; интерактивная презентация; convolutional neural networks; image recognition; object tracking; gesture control; interactive presentation
Тип документа: Выпускная квалификационная работа бакалавра
Тип файла: PDF
Язык: Русский
Уровень высшего образования: Бакалавриат
Код специальности ФГОС: 09.03.04
Группа специальностей ФГОС: 090000 - Информатика и вычислительная техника
Ссылки: Отзыв руководителя; Отчет о проверке на объем и корректность внешних заимствований
DOI: 10.18720/SPBPU/3/2021/vr/vr21-825
Права доступа: Доступ по паролю из сети Интернет (чтение, печать, копирование)
Ключ записи: ru\spstu\vkr\13302

Разрешенные действия:

Действие 'Прочитать' будет доступно, если вы выполните вход в систему или будете работать с сайтом на компьютере в другой сети Действие 'Загрузить' будет доступно, если вы выполните вход в систему или будете работать с сайтом на компьютере в другой сети

Группа: Анонимные пользователи

Сеть: Интернет

Аннотация

В данной работе был проведен обзор и сравнительный анализ современных подходов для отслеживания жестов рук человека в реальном времени на изображении с камеры при помощи нейронных сетей. Продемонстрирован процесс сбора собственного набора данных и его аугментации для обучения сверточной нейронной сети, а также сам процесс обучения. На основе полученных моделей разработано приложение для интерактивных презентаций с возможностью переключения слайдов и выделения нужных областей при помощи жестов рук. Также в приложении есть режим рисования с возможностью смены цвета кисти, а также изменения масштаба и положения виртуального холста. Произведено сравнение полученных моделей на предмет сложности обучения, скорости работы (количество кадров в секунду), удобства использования и вычислительных мощностей, необходимых для их работы.

In this paper, a review and comparative analysis of modern approaches for tracking human hand gestures in real time on a camera image using neural networks was carried out. The process of collecting your own dataset and its augmentation for training a convolutional neural network, as well as the learning process itself, is demonstrated. Based on the obtained models, an application was developed for interactive presentations with the ability to switch slides and highlight the desired areas using hand gestures. The application also has a drawing mode with the ability to change the brush color, as well as change the scale and position of the virtual canvas. Comparison of the obtained models is made for the complexity of training, speed of work (number of frames per second), ease of use and computing power required for their work.

Права на использование объекта хранения

Место доступа Группа пользователей Действие
Локальная сеть ИБК СПбПУ Все Прочитать Печать Загрузить
Интернет Авторизованные пользователи СПбПУ Прочитать Печать Загрузить
-> Интернет Анонимные пользователи

Статистика использования

stat Количество обращений: 9
За последние 30 дней: 0
Подробная статистика