Кто такой «Дактик» и что он умеет

Одиннадцатиклассник Виталий Симонов из школы № 13 города Электросталь Московской области разработал робота «Дактик», который в игровой форме может обучить всех желающих жестовому языку. Устройство распознает жесты с помощью технологий компьютерного зрения и искусственного интеллекта, а затем проверяет их правильность.

Как рассказал сам школьник, он ехал в автобусе и увидел, как слабослышащий мужчина пытался объясниться с другими людьми. И его никто не понимал.

- Я заинтересовался, решил изучить подробнее эту тему и в итоге разработал проект, - рассказал Виталий Симонов. - Всем ребятам, кто так же сильно, как и я, увлечен разработками, советую никогда не сдаваться, все время пробовать что-то новое и искать альтернативные способы решения проблемы.

У «Дактика» существует три режима работы. В зависимости от выбранного режима система предлагает пользователю показать на жестовом языке букву, слово или целую фразу. Робот считывает положение пальцев человека и показывает корректность ответа. Важно, что устройство не требует постоянного подключения к интернету, а геймификация позволяет сделать обучение более интересным и увлекательным.

По словам преподавателя центра развития творчества детей и юношества «Диалог» Сергея Симонова, школьник самостоятельно провел исследование, разработал конструкцию и программное обеспечение и обучил нейронную сеть.

«На мой взгляд, самая главная роль педагога - показать ребенку, куда он должен пойти. А дальше он сам начинает работать, искать пути и решения», - отметил Сергей Симонов.

Корпус робота распечатан на 3D-принтере, нейросеть обучалась на основе фотографий - собирались по пять фото руки на каждую букву жестового алфавита. Чтобы система компьютерного зрения могла фиксировать положение пальцев пользователя, была разработана нейронная сеть. Координаты точек поступают в математическую модель, самостоятельно разработанную Виталием Симоновым, - она векторизирует данные и позволяет системе распознавать показываемые пользователям буквы.

Мона Платонова.