Разработка и тестирование прототипа программного продукта виртуальная примерочная: фотореалистичная примерка одежды на цифровую модель пользователя полученную с помощью камеры смартфона.

Объектом исследования является разработка и тестирование прототипа программного продукта виртуальная примерочная: фотореалистичная примерка одежды на цифровую модель пользователя полученную с помощью камеры смартфона. Цель выполнения НИОКР разработать и провести тестирование прототипа программного продукта виртуальная примерочная: фотореалистичная примерка одежды на цифровую модель пользователя полученную с помощью камеры смартфона. Данной разработкой решается проблема восстановления модели человека на базе нескольких фотографий полученных с одной 3-х канальной камеры, с точностью достаточной для приложений примерки одежды. Разрабатываемый программный продукт предназначен для создания сервиса для реалистичной онлайн примерки одежды. Основным покупателем разрабатываемого программного продукта и сервиса на его основе являются интернет-магазины одежды, программный продукт позволяет им снизить издержки на возвратах одежды, а также потенциально увеличить конверсию просмотров одежды и привлечь большее количество клиентов. Результаты работы, основные технические параметры, определяющие количественные, качественные и функциональные характеристики продукции: Программный комплекс предназначен для реконструкции 3-х мерной модели человека в стандартном формате .obj на основе от 1 до 8 фотографий пользователя снятых с серии круговых ракурсов (вокруг пользователя). Технология восстановления 3-х мерного объекта основана на статистической, параметрической, деформируемой модели человека обученной на большом массиве данных 3Д моделей людей. Предобученный регрессор находит оптимальный набор параметров модели человека для максимизации сходства полученного 3Д аватара с серией силуэтов и ключевых точек, соответствующих входным фотографиям. Также в программный комплекс входят модель семантической сегментации изображения человека (Human Parsing) и модель поиска сочленений (суставов) для оценки позы и построения скелета 3Д модели человека (Keypoints Detection). Источником фотографий могут быть любые фотографии, полученные с камеры смартфона или любой другой RGB камеры. Программа реализована в виде скрипта, последовательно запускающего необходимые модули, принимающего на вход директорию с фотографиями человека и выдающим 3-х мерную модель человека. Программа обеспечивает выполнение следующих функций: - Подготовка серии входных фотографий в папке с правильной обрезкой и сжатием для дальнейшей обработки; - Оценка семантической сегментационной маски серии фотографий на основе изображений человека; - Оценка положения ключевых точек для серии фотографий на основе изображений человека; - Генерация 3-х мерной модели человека на основе серии сегментационных масок и ключевых точек; - Сохранение 3-х мерной модели человека в формате .obj. В ходе первого этапа проведенного НИОКР разработаны алгоритм восстановления параметрической модели человека на основе серии фотографий для прототипа программного продукта, алгоритм визуальной сегментации человека на изображении для прототипа программного продукта, алгоритм оценки позы человека на изображении для прототипа программного продукта, разработана утилита для экспорта аватара. Разработанные алгоритмы интегрированы в прототип программного обеспечения виртуальная примерочная: фотореалистичная примерка одежды на цифровую модель пользователя, полученную с помощью камеры смартфона и в онлайн каталог одежды для прототипа программного обеспечения. НИОКР выполнена в полном объеме в соответствии с календарным планом, результаты соответствуют требованиям технического задания. Планируется использование разработанного прототипа в работе онлайн-сервисов и интернет-магазинов. Созданная интеллектуальная собственность: Программа для ЭВМ «Программный комплекс для реконструкции 3-х мерной модели человека на основе серии фотографий полученных с камеры смартфона» зарегистрирована Федеральной Службой по Интеллектуальной Собственности (Роспатент), электронный охранный документ доступен по ссылке https://fips.ru/EGD/11c4c4fb-4938-40a9-996a-ebcdb3acf134.