Детальная информация

Тема выпускной квалификационной работы: «Разработка модуля для группировки новостных статей». Данная работа посвящена извлечению ключевых словосочетаний и группировке новостных статей на основе их анализа. Задачи, которые решались в ходе исследования: 1. Реализация метода извлечения именованных сущностей из текстов новостных статей. 2. Реализация метода извлечения ключевых словосочетаний из текстов статей. 3. Реализация алгоритма группировки новостных статей на основании анализа ключевых словосочетаний. 4. Реализация интерфейса для корректировки результатов работы модуля. Работа проведена на основе базы данных агрегатора новостей OnoMediaScope. Использованы новостные статьи, кластеризованные по темам. В работе описан модуль для группировки новостных статей на одну и ту же или смежные темы на основа- нии анализа ключевых словосочетаний. Для выделения ключевых словосочетаний проведен частотный анализ используемых слов, построено дерево зависимостей, произведено извлечение именованных сущностей. Проверены гипотезы о важности глагольных форм, существительных в родительном и предложном падежах. Произведена группировка новостных статей.

Theme of the final qualification work: “A module for grouping news articles based on the analysis of key phrases”. This work is devoted to extracting key phrases and grouping news articles. Tasks that were solved: 1. Implementation of a method for extracting named entities from news articles. 2. Implementation of a method for extracting key phrases from article texts. 3. Implementation of the algorithm for grouping news articles based on the analysis of key phrases. 4. Implementation of the interface for adjusting the results of the module. The work was carried out on the basis of the OnoMediaScope news aggregator database. News articles clustered by topic were used. The paper describes a module for grouping news articles on the same or related topics based on the analysis of key phrases. To extract key phrases, a frequency analysis of words was carried out, a dependency tree was built and named entities were extracted. The hypotheses on the importance of verb forms and nouns in the genitive and prepositional cases were tested. News articles were grouped.