Крымский студент научил нейросеть распознавать язык жестов
Студент Крымского федерального университета им. Вернадского разработал систему распознавания языка жестов с текстовой расшифровкой при помощи нейросети, сообщили в пресс-службе Мининформа РК.
«Проект включает три системы распознавания жестов, одна из которых построена на основе нейросети. Посредством камеры программа распознает жесты и выводит буквы на экран. Система способна распознавать более 30 знаков», - рассказали в Мининформе.
Как уточнили в КФУ, для обучения нейросети студент использовал собственную базу данных, в которой на каждую букву приходится от 100 до 200 примеров жестов от разных людей, с разных камер и ракурсов. «Для разработки использовалась система, состоящая в сравнении координат - костяшек руки. Также использовались специальные функции, дескрипторы многоугольника, который составляла рука. Путем математики и алгоритмов был создан датасет, при помощи которого можно идентифицировать жест», - пояснили в пресс-службе университета.