»

Базы данных научно-технической информации

»

ИКРБС: Загрузка...

ИКРБС

№ АААА-Б20-220072190104-6

Разработка системы видео распознавания на удаленном сервере с применением нейронных сетей для прототипа автономного, беспилотного робота на колесном шасси. Разработка колесной платформы для прототипа автономного, беспилотного робота на колесном шасси.

14.07.2020

В ходе первого этапа НИОКТР успешно разработана система видео распознавания на удаленном сервере с применением нейронных сетей и прототип колесного шасси для автономного беспилотного робота.Основными коструктивными элементами избраны: процессор IMX6ULL, EthernetPHY микросхема KSZ8081RNAIA-TR, микросхема MT7601U для Wi-Fi модуля, микросхема WM8960 в качестве аудио-кодека, микросхема памяти DDR3. Основой для RTSP потока выбран порт 3333. Базовом языком программирования Python с библиотеками машинного обучения Frameworks PyTorch, Yolov3 DeepSort. Приводом колесного робота подобран управляемый привод на базе бесколлекторных двигателей BLDC (BrushLessDirectCurrentMotor) с 3-х фазной обмоткой с коллекторной микросхемой DRV8302. В качестве драйвера BLDC используется микроконтроллер STM32, функционал partnumber микроконтроллера исполняет STM32F405RGT6. Серверной операционной системой принят Linux. Благодаря правильно выбранным элементам, интеграции и тестированию всех модулей, использование открытых библиотек машинного обучения и открытого кода комплекс работ по первому этапу проекта был успешно выполнен.

ГРНТИ

28.15.23 Стохастические системы автоматического управления, следящие системы

28.23.15 Распознавание образов. Обработка изображений

28.23.27 Интеллектуальные робототехнические системы

28.23.37 Нейронные сети

Ключевые слова

LIDAR

ЛИДАР

НЕЙРОННАЯ СЕТЬ

БЕСПИЛОТНЫЙ

РОБОТ

Детали

НИОКТР

№ АААА-А20-120022190020-5

Заказчик

ФЕДЕРАЛЬНОЕ ГОСУДАРСТВЕННОЕ БЮДЖЕТНОЕ УЧРЕЖДЕНИЕ "ФОНД СОДЕЙСТВИЯ РАЗВИТИЮ МАЛЫХ ФОРМ ПРЕДПРИЯТИЙ В НАУЧНО-ТЕХНИЧЕСКОЙ СФЕРЕ"

Исполнитель

ОБЩЕСТВО С ОГРАНИЧЕННОЙ ОТВЕТСТВЕННОСТЬЮ "КИБЕРДРОИД"

Похожие документы

Разработка системы видео распознавания на удаленном сервере с применением нейронных сетей для прототипа автономного, беспилотного робота на колесном шасси. Разработка колесной платформы для прототипа автономного, беспилотного робота на колесном шасси.

Разработка прототипа автономного, беспилотного робота на колесном шасси

Разработка однолучевого лидара на импульсном аваланш диоде для прототипа автономного робота на колесном шасси. Сборка и испытание прототипа автономного, беспилотного робота на колесном шасси.

"Разработка прототипа программно-аппаратного комплекса для безопасного перемещения роботов удаленного присутствия" (договор №136ГС1ЦТНТИС5/64244 от 21.12.2020) Этап №1"Разработка технической документации для прототипа. Разработка 3D модели прототипа программно-аппаратного комплекса для безопасного перемещения роботов удаленного присутствия. Разработка электрической принципиальной схемы прототипа программно-аппаратного комплекса для безопасного перемещения роботов удаленного присутствия. Разработка схемы электрической соединений прототипа программно-аппаратного комплекса для безопасного перемещения роботов удаленного присутствия. Изготовление плат для прототипа программно-аппаратного комплекса для безопасного перемещения роботов удаленного присутствия. Сборка аппаратной части прототипа." (промежуточный)

Разработка и исследование экспериментального образца базовой платформы передвижения и ее системы управления для автономного интеллектуального робототехнического комплекса (АИРТК).

Реализация программы исследовательского центра в сфере искусственного интеллекта в соответствии с планом деятельности исследовательского центра в сфере искусственного интеллекта «Исследования и разработка открытых платформенных решений на базе новых математических методов и алгоритмов и создание на этой основе отраслевых программно-аппаратных комплексов для разговорных мультимодальных ассистентов, робототехнических систем и беспилотного автотранспорта с элементами сильного искусственного интеллекта» по теме: РАЗРАБОТКА АППАРАТНО-ПРОГРАММНОГО ОБЕСПЕЧЕНИЯ СИСТЕМЫ УПРАВЛЕНИЯ ДВИЖЕНИЕМ БЕСПИЛОТНОГО ТРАНСПОРТНОГО СРЕДСТВА ТЕОРЕТИЧЕСКИЕ И ЭКСПЕРИМЕНТАЛЬНЫЕ ИССЛЕДОВАНИЯ (промежуточный, этап 2)

Разработка прототипа мобильного робота для внутрицеховой роботизированной транспортно-накопительной системы

Разработка, изготовление и испытания опытного образца программного обеспечения машинного зрения

Разработка алгоритмов выбора наилучшего снимка. Реализация алгоритмов определения параметров: освещенность, резкость, контрастность и угол съемки, которые влияют на качество изображения. Сбор и разметка собранных данных, включая нанесение меток на объекты для последующего обучения. Разделение размеченных данных на обучающий, валидационный и тестовый наборы для последующего обучения моделей. Разработка алгоритмов реализующих процесс сбора изображений в различных условиях и ситуациях, для обеспечения устойчивости модели в реальных условиях. Разработка механизмов защиты передаваемых и хранимых данных (шифрование потока). (промежуточный).

Этап №1. "Разработка модулей: захват видеопотока, GUI интерфейс, взаимодействие с аппаратурой, отчеты, передача данных. Разработка модуля нейросетевой обработки изображений развалов горной массы методом NCNN. Разработка модуля 3D-стереовидения. Разметка фотографий для нейросетевого алгоритма в среде CVAT, модель SAM. Доработка корпуса прототипа на соответствие требований IP65. Доработка электронной платы прототипа: проектирование схемы и печатной платы, сборка, отладка."