Когда жесты заговорили: новая технология даёт голос миллионам людей

Учёные представили новую систему распознавания языка жестов, основанную на глубоких нейросетях и технологиях компьютерного зрения. Разработка получила название HHODLM-SLR и призвана облегчить общение глухих и слабослышащих людей, убирая барьеры в коммуникации.

Методика работает поэтапно: сперва изображения очищаются от шумов, затем нейросеть ResNet-152 анализирует движения рук и выделяет ключевые элементы жестов, после чего система классифицирует их.

Согласно публикации в журнале Scientific Reports, точность распознавания достигла 98,95%, что значительно превышает результаты существующих технологий.

Разработку планируют внедрять как в смартфоны и камеры наблюдения, так и в специализированные устройства. Это позволит сделать коммуникацию между людьми с разными возможностями здоровья более простой и доступной.