Мобильная часть когнитивного модуля и его программное обеспечение предназначены для обработки потока фото- и видеоданных. При этом создаются датасеты, используемые в системах искусственного интеллекта на базе сегментарных моделей нейронных сетей глубокого обучения. В работе приведены результаты разработки алгоритмов машинного обучения и функционирования нейросети мобильной части когнитивного модуля роботизированной системы тепличного растениеводства и программного обеспечения для реализации разработанных алгоритмов. Представленная разработка основана на методе распараллеливания потоков видеозахвата. Тренировка нейронных сетей для определения применимости методов распознавания осуществлена средствами DIGITS с использованием фреймворка Caffe. Координатная привязка реализована на основе команды оператора о захвате сенсорами фиксируемого объекта с автоматическим определением его положения по координатам, получаемым от энкодера. Результаты сохраняются в файловой системе каталогов изображений с указанием координат пространственной привязки объектов фиксации в имени файлов.

The mobile part of the cognitive module and its software are intended for photo and video stream processing. Within these jobs the datasets used in artificial intelligence sources based on segmental models of deep learning neural networks are created. This work presents the results of the development of algorithms of machine learning and neural network functioning of the mobile part of the cognitive module of the robotic system for greenhouse crop production and the software for the developed algorithms implementation. The proposed development is based on a method of video capture streams parallelizing. Neural networks training for recognition methods applicability determination has been done by utilizing DIGITS search engine using the Caffe framework. Coordinate referencing is implemented based on the operator’s command to capture the object being fixed by sensors with automatic determination of its position according to the coordinates received from the encoder. The results are stored in the imagery catalogues’ file system with mentioning of space referencing coordinates of object to capture in the file names.

Известия высших учебных заведений. Электроника = Proceedings of universities. Electronics: научно-технический журнал. — Москва: МИЭТ, 2022 -. — Электрон. журнал. — Периодичность: 6 раз в год. — Размещен на платформе "eLIBRARY.RU", ООО НЭБ: https://elibrary.ru/. — Доступ по паролю из сети Интернет (чтение). — <URL:https://www.elibrary.ru/title_about_new.asp?id=7821>.

Известия высших учебных заведений. Электроника = Proceedings of universities. Electronics: научно-технический журнал. — Москва: МИЭТ, 2022 -. Т. 27, № 6, 2022. — (11 ст.). — Доступ по паролю из сети Интернет (чтение). — <URL:https://elibrary.ru/contents.asp?id=49993421>.