ИКРБС
№ АААА-Б20-220032490207-5

Проектирование топологии серверов системы хранения и универсальной подсистемы обработки объектов данных для прототипа системы хранения и универсальной подсистемы обработки объектов данных веб-сайтов. Адаптация имеющихся открытых протоколов обмена данными между серверами для прототипа системы хранения и универсальной подсистемы обработки объектов данных веб-сайтов. Тестирование распределенной системы хранения информации (репликации хранимой информации) с симуляцией нагрузки для прототипа системы хранения и универсальной подсистемы обработки объектов данных веб-сайтов.

13.03.2020

Цель: создание топологии серверов для обеспечения распределённого функционирования ядра прототипа системы хранения и универсальной подсистемы обработки объектов данных веб-сайтов, состоящего из распределённой базы данных объектов веб-сайтов и протоколов её взаимодействия с алгоритмами обработки данных, а также распределённой системы выдачи данных хранимых в разрабатываемой топологии размещения объектов данных веб-сайтов. Создан минимально жизнеспособный продукт, исследованы его характеристики на наборах тестовых данных, полученных путём загрузки реальных данных объектов веб-сайтов, а также количественной симуляции для выявления и устранения недостатков на основе синтетических данных. Установлено, что гипотеза о возможности создания распределённого прототипа системы хранения и универсальной подсистемы обработки объектов данных веб-сайтов, на основе созданного ранее прототипа, нашла своё подтверждение. Выбран минимально необходимый набор данных для перемещения (репликации) между экземплярами баз данных объектов веб-сайтов. Запущен в тестовую эксплуатацию программный продукт, реализующий необходимую функциональность для создания распределённой базы данных объектов веб-сайтов. Создан и запущен в тестовую эксплуатацию прототип распределённой базы данных объектов веб-сайтов. К разработанной распределённой базе данных в асинхронном режиме подключены базовые алгоритмы обработки данных объектов веб-сайтов. Проведено тестирование и получены его количественные результаты для распределённой системы хранения информации (репликации хранимой информации) с симуляцией нагрузки для прототипа системы хранения и универсальной подсистемы обработки объектов данных веб-сайтов. Основные технико-эксплуатационные характеристики: внедряемость полученного технологического решения на любом Linux-совместимом оборудовании при использовании современных каналов связи; достижимая пиковая скорость репликации между двумя экземплярами распределённой базы данных в 10 гбит/с при среднем отставании получения копий объектов веб-сайтов не более 6 с. Количественная пропускная способность системы выдачи, запущенной поверх реплицирующихся экземпляров распределённой базы данных, более чем 24 000 ответов на запросы объектов данных веб-сайтов (не более 32 килобайт каждый) в секунду на стандартном Linux-совместимом оборудовании (с числом процессорных ядер не менее 48 и двумя сетевыми интерфейсами с пропускной способностью 10 гбит/с каждый). На тестовом стенде запущен прототип распределённой системы хранения и универсальной подсистемы обработки объектов данных веб-сайтов.
ГРНТИ
50.43.17 Системы автоматического управления, системы автоматического регулирования и системы автоматического контроля для дискретных процессов
Ключевые слова
БАЗА ДАННЫХ; УСКОРЕНИЕ ВЕБ-СТРАНИЦ; АВТОМАТИЧЕСКАЯ ОБРАБОТКА ВЕБ-САЙТОВ; БОЛЬШИЕ ДАННЫЕ; АВТОМАТИЧЕСКАЯ СИСТЕМА; ПРИКЛАДНОЙ АЛГОРИТМ; ХРАНИЛИЩЕ КЛЮЧ-ЗНАЧЕНИЕ;
Детали

Заказчик
ФЕДЕРАЛЬНОЕ ГОСУДАРСТВЕННОЕ БЮДЖЕТНОЕ УЧРЕЖДЕНИЕ "ФОНД СОДЕЙСТВИЯ РАЗВИТИЮ МАЛЫХ ФОРМ ПРЕДПРИЯТИЙ В НАУЧНО-ТЕХНИЧЕСКОЙ СФЕРЕ"
Исполнитель
Общество с ограниченной ответственностью "Глобалит"
Похожие документы
Разработка структур хранения данных для прототипа системы хранения и универсальной подсистемы обработки объектов данных веб-сайтов. Разработка протоколов передачи данных для прототипа системы хранения и универсальной подсистемы обработки объектов данных веб-сайтов. Интеграция алгоритмов обработки данных для прототипа системы хранения и универсальной подсистемы обработки объектов данных веб-сайтов. Адаптация под ожидаемую нагрузку системы хранения информации прототипа. Тестирование модуля хранения информации с симуляцией нагрузки для прототипа системы хранения и универсальной подсистемы обработки объектов данных веб-сайтов.
0.926
ИКРБС
Разработка прототипа распределённой, отказоустойчивой, блочной кластерной системы организации хранения виртуальных массивов
0.918
ИКРБС
Разработка и тестирование прототипа системы хранения и универсальной подсистемы обработки объектов данных веб-сайтов с интеграцией в распределенную сеть доставки данных
0.915
ИКРБС
Разработка прототипа распределённой, отказоустойчивой, блочной кластерной системы организации хранения виртуальных массивов
0.910
НИОКТР
Разработка системы комплексного тестирования распределенных программно-определяемых средств хранения данных (заключительный)
0.890
ИКРБС
Разработка и тестирование прототипа комплексной системы организации и синхронизации данных с централизованным управлением. Этап №1 "Разработка логической части прототипа системы и построение архитектуры клиент-сервер. Разработка модуля сервера администрирования. Анализ выбора криптографической функции токенизации и построение DHT. Разработка архитектуры базы данных хранения конфигураций. Организация схемы обмена с БД для хранения конфигураций и слоев."
0.884
ИКРБС
Анализ и разработка методов и алгоритмов управления сетевыми ресурсами в распределенных вычислительных центрах обработки данных на основе программно-конфигурируемых компьютерных сетей
0.881
ИКРБС
Разработка нового поколения облачных технологий хранения и управления данными с интегрированной системой безопасности и гарантированным уровнем доступа и отказоустойчивости
0.880
ИКРБС
Разработка прототипа системы управления высокопроизводительными вычислениями в гетерогенных гибридных кластерах
0.879
НИОКТР
Разработка протоколов самоорганизации сети для построения каналов высокоскоростной передачи данных, обладающих большой производительностью, для возможности передачи потокового видео в реальном режиме
0.878
ИКРБС