Распознавание системой учитывает не только артикуляцию, но и движение губ, и выражение лица транслятора.
В программу-переводчик загружены 350 жестов. Каждый из них записан на камеру для дальнейшего определения и преобразования в картинку. В свою очередь каждая картинка запрограммирована нейросетью, что позволяет дать сигнал на соответствующий голос и текст.
Идея создания принадлежит сотруднику НГТУ. Представитель университета и его семья являются слабослышащими, поэтому необходимость в комфортной коммуникации для них ощущается максимально остро. На реализацию идеи Президентским грантом выделено 10 миллионов рублей.
Точность распознавания системой уже сейчас достигает 90%. В будущем планируется двустороннее взаимодействие переводчика со слабослышащими людьми.
На сегодняшний день услуги переводчика в этой области довольно востребованы, ведь в мире более 170 жестовых языков. Найти компетентного специалиста по переводу становится все проще и доступнее.
Материал носит исключительно новостной характер и подготовлен при участии сотрудников бюро переводов «Прима Виста» www.primavista.ru.