Разработка алгоритма визуальной сегментации человека на изображении для прототипа программного продукта виртуальная примерочная: фотореалистичная примерка одежды на цифровую модель пользователя полученную с помощью камеры смартфона. Разработка алгоритма оценки позы человека на изображении для прототипа программного продукта виртуальная примерочная: фотореалистичная примерка одежды на цифровую модель пользователя полученную с помощью камеры смартфона. Разработка алгоритма восстановления параметрической модели человека на основе серии фотографий для прототипа программного продукта виртуальная примерочная: фотореалистичная примерка одежды на цифровую модель пользователя полученную с помощью камеры смартфона." (промежуточный)

В научно-техническом отчете (НТО) представлены основные результаты выполнения первого этапа проекта по теме: “Разработка и тестирование прототипа программного продукта виртуальная примерочная: фотореалистичная примерка одежды на цифровую модель пользователя, полученную с помощью камеры смартфона”. Отчет изложен на 88 страницах и включает 13 таблиц и 12 рисунков. НТО состоит из титульного листа, оглавления, введения, основной части, заключения и списка литературы, включающего 169 наименований. В основной части отчета представлены результаты обзора открытых источников и литературы, приведены методы решения поставленных задач, отражены основные результаты выполнения проекта, представлено сравнение с передовыми решениями, описанными в литературе. Ключевые слова: виртуальная примерочная, фотореалистичная примерка одежда, 3D аватар человека, алгоритм восстановления параметрической модели человека, алгоритм визуальной сегментации, алгоритм оценки позы человека на изображении. Основной цель данного этапа НИОКР была разработка базовой модели для восстановления 3D поверхности, соответствующей человеку на изображении на основе нескольких RGB фотографий. Для достижения поставленной цели требовалось реализовать специальные модели для экстракции необходимой информации на основе 2D изображений: модель визуальной семантической сегментации и модель оценки позы в представлении ключевых точек. В ходе выполнения проекта изучены современные подходы в области 3D-реконструкции по 2D фотографиям, оценки позы и визуальной сегментации. Для каждой из поставленных задач проведен обзор современных подходов, проанализированы и отобраны лучшие решения. Для задачи 3D-реконструкции разработана базовая архитектура и проведены эксперименты для подтверждения гипотез по ее улучшению. В рамках проведенных экспериментов отобраны лучшие технологические решения и внедрены в модель. В итоге, спроектирован дизайн модели и разработан технологический прототип программы для восстановления 3D аватара по нескольким фотографиям. Для решения остальных задач отобраны и протестированы наиболее подходящие модели, находящиеся в публичном доступе и открытые для коммерческого использования. На основе данных моделей спроектированы технологические прототипы и созданы приложения. В итоге разработанная модель смогла добиться достаточных для целей нашего сервиса результатов и показать метрики сравнимые с передовыми решениями, описанными в научной литературе и источниках. Следует отметить, что разработанное нами решение удовлетворяет требованиям скорости и точности, заявленным в техническом задании. В рамках дальнейших работ на следующем этапе выполнения проекта мы планируем завершить интеграцию отдельных частей прототипа в единый программный комплекс и положить его в основу сервиса.