В Новосибирском государственном университете разработали приложение для быстрого и точного перевода жестов в текст, основанный на применении технологий искусственного интеллекта. Об этом сообщили в пресс-службе вуза.
Разработчик приложения Ярослав Чеканов самостоятельно изучил русский жестовый язык, собрал большой массив данных для обучения искусственного интеллекта и сделал тестовое решение на нем. Приложение читает изображение с видеокамеры до момента, пока не будет закончен перевод, который в дальнейшем выводится на экран. По словам автора разработки, в отличие от существующий аналогов его приложение работает быстрее и дает более точный перевод. В планах разработчика доработать модель, расширить функционал и добавить обратный перевод - из текста в жесты и из голоса в жесты.
Проект способствует инклюзивности и открывает новые возможности взаимодействия для людей с ограниченными возможностями.
Фото: unsplash