Подсказки для поиска

Внимательный

Внимающий

Спасибо за внимание

Принимая во внимание

Обратите внимание

Приложение для распознавания русского жестового языка разработали в Саратове

Новую разработку представили выпускники Института прикладных информационных технологий и коммуникаций Саратовского государственного технического университета им. Ю. А. Гагарина (ИнПИТ СГТУ). Приложение позволяет изучать теоретические основы РЖЯ, просматривать словарь и овладевать отдельными жестами, проверять свои знания и проходить интерактивное тестирование.

Уникальность приложения в том, что в него встроена нейросеть, которая помогает быстро распознать жесты через камеру смартфона. Кроме того, функция «Свободное распознавание» позволяет сразу переводить распознанные жесты в текстовый формат. Таким образом, приложение позволяет человеку, владеющему РЖЯ на минимальном уровне, понимать собеседника.

Обучение пользователей проводится на трехмерных моделях кисти руки. Руководитель проекта, старший преподаватель кафедры «Прикладные информационные технологии» ИнПИТ Екатерина Кулакова так объясняет идею работы: «Для нейросетевой модели создан собственный датасет русского языка жестов, который собирался совместно с сурдопереводчиками, а также посредством скрининга обучающих видеоресурсов.

Модуль распознавания работает по следующему принципу: нейросетевая модель получает кадр изображения из видеопотока, определяет ладонь и находит 21 контрольную точку.

Затем вектор точек передается модели, обученной на собственном датасете, которая посредством выбора наибольшей вероятности определяет жест». 

По словам авторов, мобильное приложение объединило лучшие черты аналогов и имеет ранее не представленные на российском рынке функциональные возможности. Для американского жестового языка (амслена, ASL) существуют аналогичные приложения — например, AI Sign: Sign Language, в которой применяется похожая система распознавания жестов.

Пока неизвестно, когда приложение российских разработчиков появится в открытом доступе и будет ли оно бесплатным.

Портал «Грамота.ру»

Еще на эту тему

Пальцы вместо звуков. Как общаются на жестовом языке

Особенности иной системы позволяют посмотреть со стороны на звучащую речь

В переводе на ясный: язык как инструмент инклюзии

Люди с когнитивными и лингвистическими ограничениями заинтересованы в доступных им текстах

Дети с дислексией: чем родители могут им помочь

Шансы бегло читать выше у тех, кто рано начал заниматься, считает лингвист Анна Левинзон

все публикации

«Касаемо»: простонародное слово стали воспринимать как изысканное

Ольга Северская рассказывает об употреблениях одного нелитературного слова на канале «Говорим по-русски!»

Что удивляет иностранцев в русском языке

Для кого-то наши глаголы, падежи, буквы и звуки — китайская грамота

Переводчик Наталья Мавлевич: «Перевод — это гарантированное счастье в любых жизненных обстоятельствах»

Детство, учителя, любовь к профессии, совпадения и открытия — в монологе на «Арзамасе»

Вышла книга фонетиста Ольги Антоновой об истории и характерных чертах старомосковского произношения

Некоторые рефлексы старомосковского произношения сохраняются и в современной речи

«Лучшие корректоры — это люди с высоким интеллектом и умеренным самомнением»

Редактор-корректор легендарного еженедельника «Нью-Йоркер» Мэри Норрис, известная как «Королева запятых», — о своей профессии, языке и новых технологиях

«Денег нет, но вы держитесь»: устойчивые обороты со словом «деньги»

Мы прочитали для вас первый номер журнала «Русская речь» за 2025 год

Как это по-русски? Тест на понимание смысла иноязычных идиом

Что имеют в виду французы, называя человека «молочным супом»

«С уважением, редакция Грамоты»: нужна ли здесь запятая?

О знаках препинания в подписи размышляют авторы книги «О том, чего нет и что не так в словарях и грамматиках»

Презентация «Азбукваря» художника Родиона Китаева прошла в ГЭС-2

Там сейчас заканчивается книжная выставка «Не только буквы»

«Плакали наши денежки»: как русский язык решает финансовые вопросы

В русской языковой картине мира деньги могут заводиться, утекать, быть разумными и уподобляться маленьким животным

Русская страсть к составлению словарей: достижения прошлого и цифровое будущее

Лингвист Михаил Копотев рассказывает об основных этапах развития лексикографии в России

«Розенталь хотел, чтобы мы гибко подходили к языку»

Заведующий кафедрой стилистики русского языка факультета журналистики МГУ Владимир Славкин — о том, что отличало Дитмара Розенталя как автора, педагога и консультанта

Лингвист Борис Иомдин рассказал в подкасте «Покажи язык» про язык как средство разобщения

Коммуникативные неудачи могут возникать из-за различий в возрасте и опыте

Михаил Острогорский требует от технических текстов понятности, однозначности и четкой структуры

Технический писатель — о коммуникативной задаче и языковых особенностях хорошей документации

1/6
Большой универсальный словарь русского языка (2 тома)
1 — 4 классы
Морковкин В.В., Богачева Г.Ф., Луцкая Н.М.
4.3
Подробнее об издании
От 2320 ₽
Купить на маркетплейсах:
Назовите ваше слово года!
Какие новые слова в 2024 году прочно вошли в вашу речь? На какие вы обратили внимание, какие стали чаще слышать вокруг? Участвуйте в выборе «Слова года» по версии Грамоты.
Отправить
Спасибо!
Мы получили ваш ответ и обязательно учтем его при составлении списка слов-кандидатов
Читать Грамоту дальше
Новые публикации Грамоты в вашей почте
Неверный формат email
Подписаться
Спасибо,
подписка оформлена.
Будем держать вас в курсе!