Details

Title: Реализация алгоритма сопровождения нескольких объектов на последовательности аэрофотоснимков: выпускная квалификационная работа бакалавра: направление 11.03.02 «Инфокоммуникационные технологии и системы связи» ; образовательная программа 11.03.02_01 «Системы мобильной связи»
Creators: Безбородов Андрей Константинович
Scientific adviser: Павлов Виталий Александрович; Завьялов Сергей Викторович
Organization: Санкт-Петербургский политехнический университет Петра Великого. Институт физики, нанотехнологий и телекоммуникаций
Imprint: Санкт-Петербург, 2020
Collection: Выпускные квалификационные работы; Общая коллекция
Subjects: обнаружение; распознавание; сопровождение; свёрточная нейронная сеть; аэрофотоснимок; YOLO v2; detection; recognition; multiple object tracking; convolutional neural network; sequence of aerial photographs
Document type: Bachelor graduation qualification work
File type: PDF
Language: Russian
Level of education: Bachelor
Speciality code (FGOS): 11.03.02
Speciality group (FGOS): 110000 - Электроника, радиотехника и системы связи
DOI: 10.18720/SPBPU/3/2020/vr/vr20-1010
Rights: Доступ по паролю из сети Интернет (чтение, печать, копирование)
Additionally: New arrival
Record key: ru\spstu\vkr\26971

Allowed Actions:

Action 'Read' will be available if you login or access site from another network Action 'Download' will be available if you login or access site from another network

Group: Anonymous

Network: Internet

Annotation

Данная работа посвящена реализации нейросетевого алгоритма для обнаружения и сопровождения группы движущихся объектов сложной формы на последовательности аэрофотоснимков. Предметом исследования являются объекты, наблюдаемые в результате аэрофотосъемки при помощи камеры, установленной на борту летательного аппарата. На первом этапе после обзора существующих подходов был выбран оптимальный способ обнаружения объектов на каждом из кадров входной видеопоследовательности. По результатам проведенного анализа было установлено, что в условиях сложной фоно-целевой обстановки в бортовых телевизионных системах наиболее эффективно применять нейросетевые подходы, в частности семейства YOLO. Для сопоставления уникальных движущихся объектов от кадра к кадру использован алгоритм Куна−Манкреса. Обработку проблемных си-туаций, связанных с окклюзиями и повторными появлениями объектов, предложено выполнять с помощью сравнения гистограмм обнаруженных объектов. Финальным этапом работы являлась оценка точности работы алгоритма с использованием соответствующих метрик на 10 тестовых видеопоследовательностях, которые характеризуют различные проблемные сценарии, получающиеся в результаты сопровождения объектов. Исходя из полученных результатов, предложенный подход показал высокие результаты по сравнению с алгоритмами сопровождения объектов TLD и IOU Tracker. По итогам работы был сделан вывод об эффективности предложенного подхода в условиях аэрофотосъемки и подвижной камеры. Разработанный алгоритм может применяться в задачах сопровождения определенных движущихся объектов в ходе их перемещения при съемке с борта беспилотного летательного аппарата, а также для мониторинга местности в режиме реального времени и контроля периметра охраняемых объектов.

The given work is devoted to the implementation of a neural network algorithm for detecting and tracking a group of moving objects of complex shape in a sequence of aerial photographs. The subject of the study is moving objects observed because of aerial photography using a camera mounted on board of an aircraft. At the first stage, after a review of existing approaches, the most optimal way to detect objects on the frames of the input video sequence was chosen. According to the results of the analysis, it was found that in a complex back-ground-target environment in on-board television systems, it is most effective to use neural network approaches, such as the YOLO family. The Kuhn – Munkres algorithm was used to compare unique moving ob-jects from frame to frame. It is proposed to perform the processing of problem situations related to occlusions and repeated appearances of objects by com-paring histograms of detected objects. The final stage of the work was an assessment of the accuracy of the algorithm using the appropriate metrics on 10 test video sequences that characterize various problem scenarios resulting from object tracking results. Based on the results, the proposed approach showed high results in comparison with the TLD and IOU Tracker algorithms. It was concluded that the proposed approach is effective in the conditions of aerial photography and a moving camera. The developed algorithm can be used in the tasks of tracking certain moving objects during their movement when shooting from the board of an aircraft, as well as for real-time monitoring the perimeter of protected objects.

Document access rights

Network User group Action
ILC SPbPU Local Network All Read Print Download
Internet Authorized users SPbPU Read Print Download
-> Internet Anonymous

Usage statistics

stat Access count: 1
Last 30 days: 0
Detailed usage statistics