Умелец под ником Nekhil разработал умные очки, способные переводить язык жестов в обычную речь. Гаджет на базе микрокомпьютера Raspberry Pi Zero 2 W задействует камеру Raspberry Pi Camera Module V2, в то время как за перевод жестов отвечает нейросеть YOLOv8.
Для реализации задумки энтузиаст использовал открытую платформу VIAM, созданную для работы с проектами в области искусственного интеллекта. Алгоритм считывает жесты и определяет, какой букве соответствует каждое движение пальцев и рук.
Raspberry Pi Zero 2 W работает в связке с модулем камеры V3, встроенной в оправу очков. Благодаря такой конструкции, гаджет может снимать всё, что находится перед его носителем. Для оправы Nekhil использовал компоненты, напечатанные на 3D-принтере, создав модель с помощью утилиты Fusion 360.
Выбор нейросети YOLOv8 был обусловлен тем фактом, что она лучше справляется с распознаванием американского жестового языка. Более подробная информация о проекте представлена на сайте Hackster.
Источник: