Распознавание русского жестового языка: точность системы НГТУ НЭТИ достигла 90%
Краткое изложение публикации в сообществе «Врачи РФ» от .
В 2021 году ученые НГТУ НЭТИ продолжали разработку системы распознавания русского жестового языка: программа с помощью камер и нейронных сетей распознает жесты и переводит их в текст или речь. В базу внесли 1006 жестов, точность распознавания составляет до 90%. Распознавание дактилем — букв дактильного алфавита — достигает 92%, а выделение жестов в видеопотоке пока проводится в экспериментальном режиме с точностью 85—90%. Для обучения нейронной сети использовали 350 предложений, записанных на видео; система определяет начало и завершение жеста. Разработку поддержали РФФИ в рамках русско-индийского гранта и Фонд президентских грантов. Ученые работают над компьютерным переводчиком в обе стороны, сначала для русского жестового языка.
Главное
- В программу распознавания русского жестового языка внесли 1006 жестов.
- Точность распознавания жестов составляет до 90%, а дактилем — 92%.
- Экспериментальная точность выделения жестов в видеопотоке составляет 85—90%.
- Для обучения нейронной сети использовали 350 предложений, записанных на камеру.
- Разработку поддержали РФФИ в рамках русско-индийского гранта и Фонд президентских грантов.
Подготовлено автоматически с помощью ИИ, возможны неточности. Полный просмотр материала доступен только для медицинских специалистов с высшим медицинским образованием.
Войти Регистрация