Распределенная система создания агрегированных обучающих наборов данных активности веб-сервисов

Программный комплекс предназначен для распределенной автоматизированной подготовки обучающих наборов данных активности веб-сервисов для методов машинного обучения. Программный комплекс состоит из обработчика, клиента, сервера, брокера. Обработчик получает данные из нескольких источников на разных уровнях модели OSI. На уровнях L3 и L4 данные извлекаются из наборов файлов в формате PCAP, на уровне L7 – из журналов веб-сервера. Для выявления атак применяется сигнатурный метод анализа. При обнаружении атаки сохраняются данные о ее типе, пакеты сеанса, из которых извлекаются атрибуты, выполняется их агрегация, рассчитываются статистические показатели. Клиент позволяет запускать на выполнение задания, размеченные в формате YAML. Серверная часть принимает задания и запускает обработчики. Брокер сообщений распределяет задания для выполнения на серверной части, запущенной на различных узлах.