Разработала технология для преобразования видео в звук для незрячих

Ученые из Университета Джорджтауна создали технологию для преобразования видео в звук, эта технология поможет распознавать лица незрячим людям.

В создании принимали участие как зрячие, так и незрячие добровольцы. Для создания системы использовалась видеокамера, наушники и компьютер для анализа и преобразования данных.

Принимаемые видео данные разбивались на сетку из шестидесяти четырех пикселей, и каждый квадрат преобразовывался в звуковой тон.
Для распознавания форм по слуху требовалось обучать людей в течении десяти часов, но после все из них понимали простые формы в 85 процентах случаях.

Исследование показало что нервная система может адаптироваться к принятию звуковых сигналов, так что в дальнейшем ученые хотят улучшить систему добавив большее разрешение.

Ссылка на научную статью в журнале «PLOS».