Разработка архитектуры вычислительного кластера Подготовка структуры данных и разработка конвейера Проработка системы настройки входных и выходных параметров и конфигурации конвейера. (промежуточный отсчет)

Сведения отсчета: - Количество иллюстраций = 2 - Количество примера кода = 10 - Количество частей отсчета = 15 В течении первого этапа необходимо проработать архитектуру конвейера, структуру данных, так же как и систему настройки. Так же необходимо реализовать конвейер который позволяет встраивать и использовать базовые алгоритмы, а так же принимать данные на входе и возвращает обработанные данные на выходе. Целью данного этапа является подтверждение работоспособности подхода в реализации данной системы по контролю качества данных, в том числе архитектуры и структур данных. Разработана архитектура вычислительного кластера, проработаны структуры данных используемые для передачи данных в конвейер, транспортировки данных внутри конвейера, между вычислительными процессорами, а так же выходные структуры данных. Проработана система метаданных с помощью которой происходит конфигурации конвейера, включая обрабатывающие процессоры, их последовательность и функционирование, а так же настройка входных и выходных параметров. Разработан конвейер, и необходимые базовые алгоритмы, которые позволяют расширять существующий набор алгоритмов, а так же проведено тестирование конвейера в целом и базовых алгоритмов по отдельности. В целом результат работ по этапу оценивается успешным и полученные результаты будут использованы в последующих этапах.