Саратовские разработчики представили приложение по распознаванию языка жестов

Выпускники СГТУ им. Гагарина Ю.А разработали уникальное приложение, которое предназначено для преодоления языкового барьера с людьми, имеющими нарушение слуха.

С помощью приложения пользователи могут освоить навыки понимания и общения на языке жестов, а нейросеть обеспечит быстрое распознавание жестов через камеру смартфона. Более того, одна из функций позволяет переводить распознанные жесты в текст в режиме реального времени.

«Нейросетевая модель получает кадр изображения с видеопотока, определяет ладонь и находит 21 контрольную точку. Затем вектор точек передается модели, которая посредством выбора наибольшей вероятности определяет жест», – пояснили разработчики.

Источник: vk.com

Комментарии: