Жена, която е сляпа по рождение има пред себе си купа, съдържаща предимно зелени ябълки. Когато е помолена да намери единствената червена, тя я изважда без никакво колебание и я показва за аплодисменти на публиката.
Това не е номер или магия, а демонстраниця на ново приложение, което позволява на хора с увредено зрение да чуват информация, която обикновено се възприема чрез очите. Жената носи слушалки и малка камера, закачена на чифт очила, които са свързани с лаптоп на масата, на която се намира и купата с ябълки. Серия от музикални сигнали, съчетани с приятна мелодия, й позволяват да разбере цвета, формата и местоположението на плода.
Приложението носи името EyeMusic SSD и използва компютърен алгоритъм за изграждане на “звуков пейзаж”, който предава визуална информация чрез музикални ноти. С обучение хората, които са слепи по рождение могат да се научат да четат букви и цифри, да кажат какво “виждат” от далчено разстояние и дори да разпознаят изражения на лицето и пози на тялото, казва водещият разработчик Амир Амеди, невролог и ръководител на изследователска лаборатория в университета в Йерусалим.
Как работи приложението? Когато някой се усмихва, например, човекът с увредено зрение ще чуе поредица от високи тонове в низходящ ред след това отново във възходящ, подобно на U-образната форма на усмивката. При намръщено лице тоновете ще бъдат в противоположната последователност.
Идеята за подобен интрумент съществува още от 60-те години на XX век, но по-ранните сензорни системи са изисквали компютър и не са били приятни за използване за дълъг период от време, казва Амади. Със своя екип той е разработил софтуер, който може да работи и на смартфон, свеждайки до минимум нуждата от много оборудване. По този начин технологията може да бъде използвана много по-лесно.
След свалянето на EyeMusic потребителите простро трябва да сложат слушалките си и да насочат телефона към случващото се пред тях, за да започнат да слушат. Камерата в телефона сканира заобикалящата ги среда на всеки 2 секунди и EyeMusic изгражда изображение пиксел по пиксел. Всеки пиксел съдържа няколко звукови сигнала, съответстващи на различни парченца визуална информация, която след това се сглобява в музикална композиция, представяща цялостната картина.
Мелодиите ще дават информация за случващото се отляво надясно, т.е. това което се чуе в началото е за нещата, намиращи се от лявата страна, а това, което се чуе по-късно, за нещата от дясната. По-високите тонове ще сигнализират за това, което се намира в горната част на сцената, а по-ниските за долната.
За цветовете се използват различни звукови сигнали – бялото например е представено от човешки гласове, синьото от тромпет, жълтото от цигулка, черното е мълчание и т.н. Така човек, който използва EyeMusic може да чуе наближаващо такси, като мелодията от цигулки започва да става все по-силна и по-силна с приближаването на превозното средство.
Всяка категория има свой собствен набор от уникални характеристики, което помага на слепите хора да “виждат” сгради и къщи с 90-градусови ъгли, както и обекти с по-меки контури. Научаването на програмата отнема около 70 часа, като обучителните сесии помагат на потребителите да идентифицират различни категории обекти. Приложението EyeMusic дава страхотна възможност на всички слепи по рождение хора да „виждат“ чрез своите уши.
