Детальная информация
| Название | Платформа данных для потоковой обработки и аналитической отчетности на базе Apache Flink: выпускная квалификационная работа бакалавра: направление 02.03.03 «Математическое обеспечение и администрирование информационных систем» ; образовательная программа 02.03.03_01 «Интеллектуальные информационные системы и обработка данных» = Data platform for stream processing and analytical reporting based on Apache Flink |
|---|---|
| Авторы | Дюро Илья Николаевич |
| Научный руководитель | Вербова Наталья Михайловна |
| Организация | Санкт-Петербургский политехнический университет Петра Великого. Институт компьютерных наук и кибербезопасности |
| Выходные сведения | Санкт-Петербург, 2026 |
| Коллекция | Выпускные квалификационные работы ; Общая коллекция |
| Тематика | платформа данных ; потоковая обработка ; Apache Flink ; архитектура даных ; data platform ; streaming processing ; data architecture |
| Тип документа | Выпускная квалификационная работа бакалавра |
| Язык | Русский |
| Уровень высшего образования | Бакалавриат |
| Код специальности ФГОС | 02.03.03 |
| Группа специальностей ФГОС | 020000 - Компьютерные и информационные науки |
| DOI | 10.18720/SPBPU/3/2026/vr/vr26-1611 |
| Права доступа | Доступ по паролю из сети Интернет (чтение) |
| Дополнительно | Новинка |
| Ключ записи | ru\spstu\vkr\41160 |
| Дата создания записи | 15.07.2026 |
Разрешенные действия
–
Действие 'Прочитать' будет доступно, если вы выполните вход в систему или будете работать с сайтом на компьютере в другой сети
| Группа | Анонимные пользователи |
|---|---|
| Сеть | Интернет |
В данной работе представлен подход к разработке платформы обработки потоковых данных на базе Apache Flink. Проведен анализ существующих решений, определены требования к платформе. Разработано приложение имитирующее действие пользователей онлайн-магазина электроники и передача данных в Apache Kafka. Реализован процесс обработки данных с помощью Apache Flink и их дальнейшая загрузка в ClickHouse и MinIO. Настроен мониторинг системы с помощью Prometheus и Grafana, а также построен дашборд на полученных данных в Superset.
This paper presents an approach to developing a streaming data processing platform based on Apache Flink. It analyzes existing solutions and defines the requirements for the platform. An application is developed that simulates the actions of users in an online electronics store and transfers data to Apache Kafka. The data processing process is implemented using Apache Flink and further loaded into ClickHouse and MinIO. The system is monitored using Prometheus and Grafana, and a dashboard is created using the obtained data in Superset.
| Место доступа | Группа пользователей | Действие |
|---|---|---|
| Локальная сеть ИБК СПбПУ | Все |
|
| Интернет | Авторизованные пользователи СПбПУ |
|
| Интернет | Анонимные пользователи |
|
