Details

Выпускная квалификационная работа посвящена разработке агентной системы веб-автоматизации на основе больших языковых моделей и технологий роботизации процессов. Разработанная система обеспечивает преобразование пользовательской цели, сформулированной на естественном языке, в последовательность действий для выполнения в веб-среде. Архитектура системы включает этапы анализа задачи, формирования и проверки плана действий, выполнения операций в браузере, контроля полученного результата и сохранения данных, связанных с процессом выполнения. В практической части реализована программная система на языке Python. В состав реализации входят модули планирования, корректирующего перепланирования, проверки формальной спецификации, браузерного исполнения, проверки результата, сохранения артефактов и экспериментальной оценки. Экспериментальная часть предусматривает проверку системы на сценариях реальных веб-страниц и задачах MiniWoB/BrowserGym. Для оценки используются метрики успешного исполнения, принятия результата, прохождения проверки плана, восстановления после ошибки, сохранения результата и распределения ошибок по стадиям.

The thesis is devoted to the development of an agent-based web automation system using large language models and robotic process automation technologies. The developed system transforms a user goal formulated in natural language into a sequence of actions to be executed in a web environment. The system architecture includes stages of task analysis, action plan generation and validation, browser-based execution, result verification, and storage of execution-related data. The practical part implements the system in Python. The implementation includes modules for planning, corrective replanning, formal specification validation, page observation, extraction of interactive elements, action-to-interface-element mapping, browser execution, result verification, artifact storage, and experimental evaluation. The experimental part includes system evaluation on real-web scenarios and MiniWoB/BrowserGym tasks. The evaluation uses metrics of successful execution, accepted results, plan validation pass rate, recovery after errors, result saving, and error distribution by execution stages.