Details

Title: Информационная система для исследования и оценки отзывов пользователей о продуктах: выпускная квалификационная работа магистра: направление 09.04.02 «Информационные системы и технологии» ; образовательная программа 09.04.02_04 «Системный анализ и оптимизация информационных систем и технологий»
Creators: Канас Махди
Scientific adviser: Пономарев Алексей Геннадьевич
Organization: Санкт-Петербургский политехнический университет Петра Великого. Институт компьютерных наук и технологий
Imprint: Санкт-Петербург, 2022
Collection: Выпускные квалификационные работы; Общая коллекция
Subjects: анализ мнений; анализ настроений; обнаружение спама; особенности спама; ОЕЯ; машинное обучение; глубокое обучение; opinion mining; sentiment analysis; spam detection; spam features; NLP; machine learning; deep learning
Document type: Master graduation qualification work
File type: PDF
Language: Russian
Level of education: Master
Speciality code (FGOS): 09.04.02
Speciality group (FGOS): 090000 - Информатика и вычислительная техника
DOI: 10.18720/SPBPU/3/2022/vr/vr22-3990
Rights: Доступ по паролю из сети Интернет (чтение, печать)
Additionally: New arrival
Record key: ru\spstu\vkr\18220

Allowed Actions:

Action 'Read' will be available if you login or access site from another network

Group: Anonymous

Network: Internet

Annotation

Тема магистерской диссертации: «Информационная система для исследования и оценки отзывов пользователей о продуктах».Данная работа посвящена исследованию задач анализа мнений и анализа настроений, обнаружению спама мнений, а также созданию модулей обнаружения спама и анализа мнений  на уровне отзыва и их внедрению.Задачи, которые были решены в этой работе:Демонстрация влияния спам-отзывов на результаты системы анализа мнений и важности включения модуля обнаружения спама.Создание модуля обнаружения спама, используя особенности, которые извлекаются из текста отзыва, и внедрение этой системы.Анализ роли систем анализа мнений на современном конкурентном рынке и различные области применения этих систем.Создание системы анализа мнений, способной определять ориентацию настроений в отзывах, и внедрение этой системы.Анализ полученных результатов тестирования построенных модулей на основе показателей оценки.В ходе выполнения этой работы будет показана важность мнений как движущей силы человеческого поведения и рынка в целом, а также будут исследованы решаемые задачи в области анализа мнений и различные подходы к их решению и уровни проведения задачи анализа мнений, а также будут предложена система анализа мнения, включающая в себя модули обнаружения спама и анализа настроений на уровне отзыва.Оба модуля были построены и реализованы с использованием языка программирования Python. Для этой цели были использованы 2 модели: модель машинного обучения для обнаружения спама, и модель глубокого обучения для анализа настроений. Модуль обнаружения спама обрабатывает данные и извлекает все нужные особенности из домена отзыва перед обучением модели, а модуль анализа настроений обрабатывает данные и переводит их в числовые значения перед анализом.Кроме того, были использованы 2 общедоступных набора данных для обучения моделям машинного обучения и глубокого обучения.В результате эти две модели были оценены, чтобы продемонстрировать эффективность, надежность и удобство использования этих моделей наряду с предложенным подходом, а также их готовность к использованию в реальных приложениях.

The subject of the graduate qualification work is «Information system for researching and evaluating user reviews of products».The given work is devoted studying the tasks of opinion analysis and sentiment analysis, the detection of opinion spam, as well as the creation of spam detection and opinion analysis modules at the review-level and their implementation.The research set the following goals:Demonstrating the impact of spam reviews on the results of the opinion analysis system and the importance of enabling the spam detection module.Creating a spam detection module using features that are extracted from the text of the review, and implementing this system.Analyzing the role of opinion analysis systems in the modern competitive market and various applications of these systems.Creating an opinion analysis system capable of determining the orientation of sentiment in reviews, and implementing this system.Analyzing the obtained test results of the constructed modules based on performance measures.In the course of this work, the importance of opinions as a driving force of human behavior and the market as a whole will be shown, as well as the researched tasks in the field of opinion analysis and various approaches to solving them and the levels of performing opinion analysis will be investigated, and an opinion analysis system will be proposed, including spam detection and sentiment analysis modules on the review-level.Both modules were built and implemented using Python programming language. For this purpose, 2 models were used: a machine learning model for spam detection, and a deep learning model for sentiment analysis. The spam detection module processes the data and extracts all the necessary features from the review- domain before training the model, and the sentiment analysis module processes the data and converts it to numeric values before analysis.In addition, 2 publicly available datasets were used to train machine learning and deep learning models.As a result, these two models were evaluated to demonstrate the effectiveness, reliability and usability of these models along with the proposed approach, as well as their readiness for use in real applications.

Document access rights

Network User group Action
ILC SPbPU Local Network All Read Print
External organizations N2 All Read
External organizations N1 All
Internet Authorized users SPbPU Read Print
Internet Authorized users (not from SPbPU, N2) Read
Internet Authorized users (not from SPbPU, N1)
-> Internet Anonymous

Usage statistics

stat Access count: 2
Last 30 days: 2
Detailed usage statistics