Детальная информация

Название: Информационная система для исследования и оценки отзывов пользователей о продуктах: выпускная квалификационная работа магистра: направление 09.04.02 «Информационные системы и технологии» ; образовательная программа 09.04.02_04 «Системный анализ и оптимизация информационных систем и технологий»
Авторы: Канас Махди
Научный руководитель: Пономарев Алексей Геннадьевич
Организация: Санкт-Петербургский политехнический университет Петра Великого. Институт компьютерных наук и технологий
Выходные сведения: Санкт-Петербург, 2022
Коллекция: Выпускные квалификационные работы; Общая коллекция
Тематика: Информационные системы; Искусственный интеллект; анализ мнений; анализ настроений; обнаружение спама; особенности спама; глубокое обучение; opinion mining; sentiment analysis; spam detection; spam features; deep learning
УДК: 004.7; 004.8
Тип документа: Выпускная квалификационная работа магистра
Тип файла: PDF
Язык: Русский
Уровень высшего образования: Магистратура
Код специальности ФГОС: 09.04.02
Группа специальностей ФГОС: 090000 - Информатика и вычислительная техника
DOI: 10.18720/SPBPU/3/2022/vr/vr22-3990
Права доступа: Доступ по паролю из сети Интернет (чтение, печать)
Ключ записи: ru\spstu\vkr\18220

Разрешенные действия:

Действие 'Прочитать' будет доступно, если вы выполните вход в систему или будете работать с сайтом на компьютере в другой сети

Группа: Анонимные пользователи

Сеть: Интернет

Аннотация

Тема магистерской диссертации: «Информационная система для исследования и оценки отзывов пользователей о продуктах». Данная работа посвящена исследованию задач анализа мнений и анализа настроений, обнаружению спама мнений, а также созданию модулей обнаружения спама и анализа мнений на уровне отзыва и их внедрению. Задачи, которые были решены в этой работе: Демонстрация влияния спам-отзывов на результаты системы анализа мнений и важности включения модуля обнаружения спама. Создание модуля обнаружения спама, используя особенности, которые извлекаются из текста отзыва, и внедрение этой системы. Анализ роли систем анализа мнений на современном конкурентном рынке и различные области применения этих систем. Создание системы анализа мнений, способной определять ориентацию настроений в отзывах, и внедрение этой системы. Анализ полученных результатов тестирования построенных модулей на основе показателей оценки. В ходе выполнения этой работы будет показана важность мнений как движущей силы человеческого поведения и рынка в целом, а также будут исследованы решаемые задачи в области анализа мнений и различные подходы к их решению и уровни проведения задачи анализа мнений, а также будут предложена система анализа мнения, включающая в себя модули обнаружения спама и анализа настроений на уровне отзыва. Оба модуля были построены и реализованы с использованием языка программирования Python. Для этой цели были использованы 2 модели: модель машинного обучения для обнаружения спама, и модель глубокого обучения для анализа настроений. Модуль обнаружения спама обрабатывает данные и извлекает все нужные особенности из домена отзыва перед обучением модели, а модуль анализа настроений обрабатывает данные и переводит их в числовые значения перед анализом. Кроме того, были использованы 2 общедоступных набора данных для обучения моделям машинного обучения и глубокого обучения. В результате эти две модели были оценены, чтобы продемонстрировать эффективность, надежность и удобство использования этих моделей наряду с предложенным подходом, а также их готовность к использованию в реальных приложениях.

The subject of the graduate qualification work is «Information system for researching and evaluating user reviews of products». The given work is devoted studying the tasks of opinion analysis and sentiment analysis, the detection of opinion spam, as well as the creation of spam detection and opinion analysis modules at the review-level and their implementation. The research set the following goals: Demonstrating the impact of spam reviews on the results of the opinion analysis system and the importance of enabling the spam detection module. Creating a spam detection module using features that are extracted from the text of the review, and implementing this system. Analyzing the role of opinion analysis systems in the modern competitive market and various applications of these systems. Creating an opinion analysis system capable of determining the orientation of sentiment in reviews, and implementing this system. Analyzing the obtained test results of the constructed modules based on performance measures. In the course of this work, the importance of opinions as a driving force of human behavior and the market as a whole will be shown, as well as the researched tasks in the field of opinion analysis and various approaches to solving them and the levels of performing opinion analysis will be investigated, and an opinion analysis system will be proposed, including spam detection and sentiment analysis modules on the review-level. Both modules were built and implemented using Python programming language. For this purpose, 2 models were used: a machine learning model for spam detection, and a deep learning model for sentiment analysis. The spam detection module processes the data and extracts all the necessary features from the review- domain before training the model, and the sentiment analysis module processes the data and converts it to numeric values before analysis.In addition, 2 publicly available datasets were used to train machine learning and deep learning models. As a result, these two models were evaluated to demonstrate the effectiveness, reliability and usability of these models along with the proposed approach, as well as their readiness for use in real applications.

Права на использование объекта хранения

Место доступа Группа пользователей Действие
Локальная сеть ИБК СПбПУ Все Прочитать Печать
Интернет Авторизованные пользователи СПбПУ Прочитать Печать
-> Интернет Анонимные пользователи

Статистика использования

stat Количество обращений: 5
За последние 30 дней: 0
Подробная статистика