Детальная информация

Название Построение автоматизированной системы предиктивного анализа данных по недвижимости с использованием машинного обучения: выпускная квалификационная работа магистра: направление 09.04.04 «Программная инженерия» ; образовательная программа 09.04.04_02 «Основы анализа и разработки приложений с большими объемами распределенных данных»
Авторы Меркадо Оудалова Данило Анатоли
Научный руководитель Никифоров Игорь Валерьевич
Организация Санкт-Петербургский политехнический университет Петра Великого. Институт компьютерных наук и кибербезопасности
Выходные сведения Санкт-Петербург, 2024
Коллекция Выпускные квалификационные работы; Общая коллекция
Тематика прогнозный анализ данных; контейнеры; модель машинного обучения; методы обработки данных; predictive data analysis; containers; machine learning model; data processing methods
Тип документа Выпускная квалификационная работа магистра
Тип файла PDF
Язык Русский
Уровень высшего образования Магистратура
Код специальности ФГОС 09.04.04
Группа специальностей ФГОС 090000 - Информатика и вычислительная техника
DOI 10.18720/SPBPU/3/2024/vr/vr24-4373
Права доступа Доступ по паролю из сети Интернет (чтение, печать, копирование)
Дополнительно Новинка
Ключ записи ru\spstu\vkr\33211
Дата создания записи 29.08.2024

Разрешенные действия

Действие 'Прочитать' будет доступно, если вы выполните вход в систему или будете работать с сайтом на компьютере в другой сети

Действие 'Загрузить' будет доступно, если вы выполните вход в систему или будете работать с сайтом на компьютере в другой сети

Группа Анонимные пользователи
Сеть Интернет

В настоящей работе предлагается метод построения автоматической системы прогнозного анализа недвижимости с машинным обучением с использованием распределенного подхода, который допускает соответствующее масштабирование и может быть применен в различных ситуациях. Данная работа посвящена изучению недостатков существующих систем прогнозной аналитики и приведению примера автоматической системы прогнозной аналитики, которая обладает передовым опытом, использует современные технологии и позволяет проводить анализ наиболее эффективным из возможных способов. Для достижения эти цели будут использованы передовые методы извлечения, преобразования и очистки данных с последующей реализацией модели машинного обучения с использованием Apache Spark. Кроме того, была использована архитектура "master worker", которая обеспечивает оптимальную емкость хранилища в сочетании с повышенной отказоустойчивостью за счет интеграции кластера Apache Kafka с использованием согласованного протокола Kraft, а также переносимости и контейнеров Docker. Этот комплексный подход разработан для того, чтобы предложить надежное и масштабируемое решение проблем принятия решений в сфере недвижимости. Результаты показывают, что такой подход сокращает временные и трудозатраты на выполнение этих задач.

This paper proposes a method for building an automatic predictive real estate analysis system with machine learning using a distributed approach that allows the appropriate scaling that can be applied in different situations. This work is devoted to studying the shortcomings of existing predictive analytics systems and giving an example of an automatic predictive analytics system that has advanced experience, uses modern technologies, and allows analysis to be carried out in the most effective way possible. To achieve this goal, advanced methods of data extraction, transformation and purification will be used, followed by the implementation of a machine learning model using Apache Spark. In addition, the "master worker" architecture was used, which provides optimal storage capacity combined with increased fault tolerance due to the integration of the Apache Kafka cluster using the agreed Kraft protocol, as well as portability and Docker containers. This comprehensive approach is designed to offer a reliable and scalable solution to real estate decision-making challenges. The results show that this approach reduces the time and labor cost of these tasks.

Место доступа Группа пользователей Действие
Локальная сеть ИБК СПбПУ Все
Прочитать Печать Загрузить
Интернет Авторизованные пользователи СПбПУ
Прочитать Печать Загрузить
Интернет Анонимные пользователи

Количество обращений: 1 
За последние 30 дней: 1

Подробная статистика