Details

Данная работа посвящена рассмотрению разработки подсистемы распределенного хранения данных для web-сервиса интеграции облачных хранилищ, с возможностью внедрения модулей с малым временем доступности. В рамках работы описаны важнейшие характеристики подсистемы, такие как возможность использования группы из нескольких хранилищ в качестве единого целого. Кроме того, рассмотрен набор моделей ключевых сущностей и соответствующая им модель данных, необходимые для создания подсистемы, а также алгоритм распределённого хранения, принимающий решение о необходимости репликации и разбиения загружаемых данных на части, в частности о конкретных хранилищах, на которые их следует поместить, исходя из соображений равномерной загруженности, с учётом произвольно заданных характеристик. В процессе выполнения работы были изучены различные технологии, такие как фреймворк для Web-приложений Django, написанный на языке Python, а также паттерн проектирования MVC. Результатом работы является завершённая подсистема распределенного хранения данных, интегрированная в веб-сервис, основной задачей которого является объединение пользовательских хранилищ, полностью отвечающая поставленным задачам.

This work describes distributed data storing subsystem for cloud storages integration web service with capability of using low availability modules. It contains description of the key subsystem properties, such as capability to use the group of cloud storages jointly. Moreover, it suggests set of entities and appropriative data scheme alongside with data distribution algorithm, which decides about necessity of replication and partition of uploading data, in particular about specific storages to places data blocks, in order to achieve uniform disk usage. As a result of this work distributed data storing subsystem was developed and integrated into web service, which main purpose is user cloud storages integration.