Посредством нейронных сетей камера будет узнавать жесты глухонемых и переводить их в текст или голос
НОВОСИБИРСК, 4 декабря. /ТАСС/. Новосибирские ученые создадут систему компьютерного распознавания русского и индийского жестовых языков к концу 2021 года, сообщил ТАСС профессор кафедры автоматизированных систем управления Новосибирского государственного технического университета Михаил Гриф.
"Наш проект - это компьютерное распознавание жестов глухих: русского жестового языка и индийского. У них аналогичная разработка, это работа совместная", - сказал Гриф.
По его словам, распознавание будет происходить с помощью камеры, которая посредством нейронных сетей будет узнавать жесты глухонемых и переводить их в текст или голос. В перспективе рассматривается создание компьютера или смартфона, способного не только определять жесты глухих, но визуализировать для них жестами текст или голос. Совместный проект поддержан РФФИ, рассчитан на два года.
В мире существует около 130 жестовых языков, каждый из которых более чем наполовину отличается от других. В одном таком языке около 3-5 тыс. жестов, каждый из которых производится руками в сочетании с мимикой, формой или движением рта и губ, а также в сочетании с положением корпуса тела. По данным Всероссийского общества глухих, численность глухих, которые являются носителями жестового языка - более 300 тыс. человек. В эту статистику попали те, кто потерял слух полностью или частично в раннем возрасте, или люди с врожденными дефектами слуха.
По данным ВОЗ, более 5% населения мира - 466 млн человек (432 млн взрослых людей и 34 млн детей) - страдают от инвалидизирующей потери слуха (потеря слуха в слышащем лучше ухе, превышающая 40 дБ у взрослых людей и 30 дБ у детей). Большинство таких людей живет в странах с низким и средним уровнем дохода.