«Сенсор-тех» и «Союзмультфильм» создадут виртуального помощника для слабослышащих людей

Киностудия «Союзмультфильм» и лаборатория «Сенсор-тех», которая занимается разработкой ассистивных технологий для людей, имеющих нарушения зрения и слуха, приступили к созданию виртуального сурдопереводчика.

Проект реализуется на основе поддержки Российского фонда развития информационных технологий.

Виртуальная технология будет помогать слабослышащим людям коммуницировать друг с другом, а также решать другие задачи в интернет-пространстве.

Основу разработки составляет технология motion capture, представляющая собой оцифровку движений реального человека или объекта и перенос их на трехмерную модель для дальнейшего создания анимационных персонажей или иных объектов.

Виртуальный помощник получил название Даша и способен генерировать жесты, используемые слабослышащими людьми. Мимика и жесты виртуального помощника были созданы с помощью профессионального сурдопереводчика Дарьи Шарафаненко.

В перспективе также обучение персонажа русскому жестовому языку, переводу его в текст и озвучиванию голосом.

Кроме виртуального помощника в разрабатываемом онлайн-сервисе «Сурдо-помощь» также будут иные функции:

— перевод речевой информации в текст и обратно;

— сервис по выбору и получению услуг настоящего сурдопереводчика онлайн;

— виртуальный сурдоперевод с использованием технологии искусственного интеллекта;

— перевод речи в виде субтитров.

«Сегодня технология motion capture применяется не только в анимации, но в игровом кино, компьютерных играх, – отметил руководитель студии захвата движения Сергей Лобанков, – у «Союзмультфильма» есть большой опыт в этой сфере, однако, содействие в создании приложения для сурдоперевода – новый и знаковый этап для нас. Платформа поможет людям с ограниченным слухом в режиме 24/7 общаться и воплощать свои идеи в жизнь».

На сегодняшний день разработка находится на этапе съемки материалов для будущего приложения, которое в 2024 году станет доступно как веб-портал и как мобильное приложение для разных ОС.

0 комментариев