ИКРБС
№ АААА-Б20-220110390075-6Проведение экспериментальных исследований и обобщение результатов проекта
30.06.2020
Данные исследования проводились совместно с Иностранным партнером, которым выступал Западночешский университет (он же Университет Западной Богемии, the University of West Bohemia), г. Пльзень, Чешская Республика, в соответствии с Договором о научном сотрудничестве и Соглашением о выполнении совместного проекта с Иностранным партнером. На этапе 3 Исполнителем проекта (СПИИРАН) решались следующие основные задачи: 1) внедрение жестового и речевого интерфейсов в прототип ассистивного мобильного информационного робота; 2) проведение экспериментальных исследований по многомодальному взаимодействию человека и робота; 3) обобщение результатов работы; 4) подготовка публикаций по текущим результатам работ; 5) подготовка документов для государственной регистрации РИД; 6) разработка заключительного отчета о выполненных работах и отчетной документации в соответствии с требованиями технического задания и нормативных актов Минобрнауки России. Результаты данных исследований и работ представлены детально в разделах 1-6 настоящего отчета о проведении исследований. Иностранным партнером выполнялись научно-исследовательские работы по нескольким основным направлениям, тесно взаимосвязанным с работами, выполняемыми в СПИИРАН, включая разработку программного обеспечения для автоматического распознавания статических и динамических жестов рук, разработку жестового интерфейса, включающего обработку жестового языка, для организации бесконтактного взаимодействия с роботами, внедрение жестового интерфейса, включая жестовый язык, в мобильном информационном роботе. Иностранным партнером была разработана базовая отчетная документация и подготовлены публикации по результатам работ. Результаты данной работы представлены в виде Аннотационного отчета в разделе 7 настоящего отчета о проведении исследований. Данный раздел составлен Исполнителем проекта на основании выполненного русскоязычного перевода аннотационного отчета на английском языке, подготовленного Иностранным партнером в июне 2020 г. и предоставленного Исполнителю по электронной почте. Все работы выполнялись в соответствии с планом-графиком исполнения обязательств при проведении исследований, представленном в Соглашении. На текущем этапе выполнялись работы по внедрению жестового и речевого интерфейсов в прототип ассистивного мобильного информационного робота, проведению экспериментальных исследований по многомодальному взаимодействию человека и робота, обобщению результатов работ, подготовке публикаций по результатам исследований, подготовке документов для государственной регистрации РИД, разработке заключительного отчета о выполненных работах и отчетной документации в соответствии с требованиями технического задания и нормативных актов Минобрнауки России.
ГРНТИ
16.31.21 Автоматическая обработка текста. Автоматический перевод. Автоматическое распознавание речи
28.23.27 Интеллектуальные робототехнические системы
28.23.15 Распознавание образов. Обработка изображений
Ключевые слова
Многомодальный интерфейс
речевой интерфейс
жестовый интерфейс
ассистивные технологии
мобильный информационный робот
Детали
Заказчик
МИНИСТЕРСТВО НАУКИ И ВЫСШЕГО ОБРАЗОВАНИЯ РОССИЙСКОЙ ФЕДЕРАЦИИ
Исполнитель
ФЕДЕРАЛЬНОЕ ГОСУДАРСТВЕННОЕ БЮДЖЕТНОЕ УЧРЕЖДЕНИЕ НАУКИ "САНКТ-ПЕТЕРБУРГСКИЙ ФЕДЕРАЛЬНЫЙ ИССЛЕДОВАТЕЛЬСКИЙ ЦЕНТР РОССИЙСКОЙ АКАДЕМИИ НАУК"
Похожие документы
Проведение теоретических исследований, разработка и усовершенствование программного обеспечения
0.951
ИКРБС
Выбор направления исследования и сбор данных
0.932
ИКРБС
«Разработка прототипа тифлотехнического программно-аппаратного ассистента для самостоятельного передвижения незрячих людей (версия с микровибраторами)» (договор №3928ГС1/65601 от 24.02.2021) (итоговый)
0.873
ИКРБС
«Разработка прототипа программной прошивки контроллера тактильного индикатора прототипа Ассистента. Изготовление прототипа Ассистента (версия с микровибраторами). Разработка программы и методики испытаний прототипа Ассистента. Проведение испытаний прототипа Ассистента.» (договор №3928ГС1/65601 от 24.02.2021) (итоговый)
0.869
ИКРБС
ОТЧЕТ о выполнении НИОКР по теме:
"Разработка и тестирование прототипа коммуникативной платформы на основе речевых интерфейсов для взаимодействия роботизированных устройств с учениками в образовательном процессе и внеурочной деятельности."
(договор №223ГС1ЦТНТИС5/64222 от 15.02.2021)
Этап №1"Разработка компонентов веб-приложения учителя: базовый конструктор урока, базовый конструктор тестов. Разработка сервиса выгрузки отчетов. Разработка интеграции сервиса и API аппаратной части робота. Разработка front-end и UXинтерфейсов программного обеспечения прототипа. Разработка нескольких типовых базовых уроков. Разработка архитектуры и требований для подключения мобильного webприложения конструктора тестов для школьников. Разработка базового сервиса управления роботом на стороне робота. Разработка интеграции с SDK программной части робота. Разработка интеграции с внешним оборудованием для проведения уроков."
(промежуточный)
0.868
ИКРБС
Программно-аппаратные методы сенсорики и машинного восприятия для робототехнических систем с автономным движением. Этап 1 (28.09.2021-31.12.2021).
0.866
ИКРБС
1 этап выполнения НИОКР по теме:
«Разработка и тестирование прототипа роботизированной информационно-обучающей системы для операторов технологических процессов на основе интеллектуального анализа технических данных и пользовательских знаний при выполнении учебно-технологической задачи» (договор №3767ГС1/63240 от 11.12.2020)
«Разработка набора функционально-технических возможностей прототипа информационно-обучающей системы с использованием технологических данных. Проектирование модульной архитектуры и разработка механизмов функционирования прототипа информационно-обучающей системы с интеллектуальным управлением параметрами обучения. Разработка программно-алгоритмической документации для реализации машины логического вывода и инструментов распознавания учебной ситуации на основе анализа промежуточных технических данных. Разработка определяющих критериев для эффективного оценивания взаимодействия пользователя с прототипом информационно-обучающей системы в различных режимах работы. Разработка структуры базы знаний и функционально-логической схемы представления учебной информации на основе выбранной предметной области с использованием математического аппарата. Разработка алгоритма взаимодействия пользователя с базой знаний с помощью визуального интерфейса прототипа информационно-обучающей системы. Объектно-ориентированная программная реализация основных классов объектов и модулей прототипа информационно-обучающей системы на языке высокого уровня C#. Тестирование работоспособности прототипа информационно-обучающей системы.» (заключительный)
0.865
ИКРБС
Экспериментальные исследования поставленных перед ПНИ задач
0.864
ИКРБС
Разработка прототипа программного обеспечения для удаленного измерения протезов нижних конечностей и технологии проектирования косметических накладок для протезов нижних конечностей. (заключительный)
0.863
ИКРБС
Многомодальный интерфейс на основе жестов и речи для управления ассистивным мобильным информационным роботом
0.860
НИОКТР