Языку жестов научил компьютер новосибирский программист

Алексей Приходько - за работой. Учит компьютер распознавать русский язык жестов. В основе программы - сложная математическая модель. Разработал ее сам. Техника уже понимает буквы.

«Когда конфигурация показывается рукой, она распознается камерой, специальным датчиком. Далее проходит через определенную систему, на экране появляются буквы», - рассказал программист Алексей Приходько.

Как и его родители, Алексей - глухой от рождения. Язык жестов для него родной. Рассказывает, что не все могут общаться с помощью звуков. Поэтому вынуждены либо писать, либо говорить только через переводчика. Разработкой проекта Алексей занимается на базе НГТУ - это его диссертация.

«Алексей решил две задачи. Это распознавание конфигурации ладони и локализация жестов. Чтобы закончить диссертацию, ему еще надо распознавать движения и мануальные компоненты. Сделано примерно 70 - 80 процентов», - говорит профессор кафедры автоматизированных систем управления Михаил Гриф.

Переплетение математики, техники и лингвистики. Когда программа выучит алфавит, можно будет переходить к словам, а затем и к целым фразам. В русском жестовом языке очень много нюансов. Здесь важно все - от постановки пальцев и движения кистей, до мимики и положения тела. Сейчас точность компьютера - примерно 80 процентов. Эту программу ждут не только глухие люди, но и сурдопереводчики. Ведь она сильно помогла бы в обучении специалистов.

«Ценность именно этой программы в том, что при изучении новых жестов люди могли бы вводить в их программу и узнавать, что они значат, как переводятся на русский язык. Показал в камеру жест, компьютер выдал слово. И все, пожалуйста, работай, изучай язык самостоятельно», - рассказала заведующая лабораторией русского жестового языка НГТУ Ольга Варинова.

Разработкой подобных программ занимаются в разных странах. Алексей сотрудничает с мировыми институтами. Например, недавно для обмена опытом он посетил Германию. Но это - не единственный его проект. Сейчас есть еще одна разработка - управление техникой с помощью жестов.

По словам научного руководителя Алексея Приходько, уже совсем скоро можно будет увидеть плоды его трудов в быту.

Источник