Разработка прототипа программного комплекса сквозной бизнес-аналитики на основе массивов больших данных (версии для крупного бизнеса и рекламных агентств)

Объектом исследования и разработки является программный комплекс сквозной бизнес-аналитики на основе массивов больших данных (версия для крупного бизнеса и рекламных агентств). Целью работы являются: проработка архитектуры и отдельных блоков программного комплекса, определение их работоспособности на данных реальных компаний, уточнение требований к аппаратному обеспечению программного комплекса сквозной бизнес-аналитики на основе больших данных в части модулей загрузки и обработки данных; анализ, создание, проработка и настройка прототипа веб-интерфейса, обеспечение безопасного развертывания отдельных модулей версии программного комплекса крупного бизнеса и рекламных агентств; возможность использовать разработанный пользовательский интерфейс для масштабируемых и сложных по архитектуре проектов; разработка модуля автоматизированной развертки программного комплекса на различных серверах, подходящего для выполнения многосерверных и многоуровневых рабочих процессов, сокращения времени на развертывание программного комплекса, упрощение процесса автоматизированной установки софта на разные сервера и обновление системы; разработка модуля генерации документации для преобразования модели из разных источников в легко читаемый и логически выстроенный текст. Метод проведения работы: проведение технико-экономического анализа, разработка отдельных блоков, их тестирование на различных массивах данных, разработка пользовательского интерфейса и отдельных модулей, запуск программного комплекса с разных серверов, тестирование модулей автоматизированной развертки и генерации документации на различных массивах данных. Результаты работы: была проведена разработка пользовательского интерфейса и архитектуры модуля проектирования предметной модели, модуля проектирования Staging-таблиц, модуля проектирования Data Vault, модуля проектирования пользовательских преобразований, модуля валидации консистентности данных, модуля валидации формул преобразования, модуля автоматизированной развертки и модуля генерации документации, а также собран прототип программного комплекса сквозной бизнес-аналитики на основе больших данных. Была проведена работа по выбору методологии организации данных в хранилище, разработаны методы обработки данных. Результаты работы рекомендуются для опытного внедрения и дальнейшей доработки системы сквозной бизнес-аналитики на основе массивов больших данных. Все цели, поставленные на этап НИР, были успешно выполнены.