Данная работа посвящена разработке системы сбора и анализа информации с образовательных интернет-сервисов в области IT-технологий. Разрабатываемая система должна собирать данные с образовательных интернет-порталов в области IT и на основе выбранной специализации и выбранного IT-инструмента, предоставлять информацию о соответствующих курсах, отранжированную по релевантности и/или по стоимости обучения. Анализ текстовой информации, полученной краулером с сайтов осуществляется методами обработки естественного языка на Python и встроенными средствами пакета Polyanalyst.

This work is devoted to the development of a system for collecting and analyzing information from educational Internet services in the field of IT technologies. The developed system should collect data from educational Internet portals in the field of IT and, based on the chosen specialization and the chosen IT tool, provide information about the relevant courses, ranked by relevance and / or by cost of education. Analysis of textual information received by the crawler from sites is carried out by natural language processing methods in Python and built-in tools of the Polyanalyst package.