В ТПУ разрабатывают мобильный переводчик, способный превращать речь в «мультики» для глухих

Магистранты ТПУ разрабатывают мобильное приложение, которое позволит при помощи обычного смартфона переводить звучащую речь на язык жестов, сообщила пресс-служба вуза.

«Приложение, над которым работают магистранты Института кибернетики ТПУ Виталий Видман и Александра Репецкая, станет посредником в общении с собеседниками, имеющими дефекты слуха. Программа будет моментально переводить звучащую речь на язык жестов и выводить анимацию на экран смартфона», — говорится в сообщении.

Приложение будет преобразовывать звучащие слова в текст, а текст – в анимированные картинки с жестами. Как говорят специалисты, самая большая сложность — сделать так, чтобы программа верно переводила синтаксические конструкции, так как в языке жестов особый грамматический строй. Чтобы решить эту проблему, авторы проекта планируют сотрудничать с профессиональными сурдопереводчиками.

По информации пресс-службы, приложение будет отображать не только целые слова, но и работать с дактильной (пальцевой) азбукой, благодаря которой можно проговаривать по буквам сложные слова – например, имена собственные. В настоящее время разработчики уже создали прототип приложения, однако словарный запас программы пока ограничен, а вводить слова можно только с клавиатуры.

«Программа будет помогать в изучении новых жестов. В повседневном общении человек использует лишь ограниченный набор и поэтому может не знать каких-то слов. Мы загрузим в приложение обширный словарь, который будет включать и специальную терминологию. Просматривая жестовый перевод, люди с нарушениями слуха смогут изучать новые слова», — поясняется в сообщении.

Метки: Томск, ТПУ, мобильное приложение, сурдоперевод

Поделитесь
Первая Частная Клиника
ПРОФЕССИОНАЛЬНО, ОПЕРАТИВНО, КОМФОРТНО
Радио Свобода
“Фактограф” нацелен на фактчекинг - сопоставление текущих заявлений политиков или официальных структур как с реальными фактами, выраженными в доступной статистике или открытой информации, так и с оценками и мнениями независимых экспертов.
В фокусе проекта - проблемы внутренней политики России, социальной сферы, труда и занятости, демографии, экологии.
Детская художественная школа №1
Успей записаться на курсы и мастер-классы!
Поделитесь
Вы подтверждаете удаление поста?
Этот пост используется в шапке на главной странице.
Его удаление повлечет за собой удаление шапок соответствущих страниц.
Вы подтверждаете удаление поста?