A szájmozgásból felismerhetők a szavak

A megoldás minden felhasználó számára hasznos lehet.

A Kaliforniai Egyetem kutatói kifejlesztették a LipType nevű szájról olvasó eszközt, amelynek a segítségével a fogyatékkal élők és az egészséges személyek biztonságosan kommunikálhatnak a számítógépekkel és más elektronikus készülékekkel. A LipType a szájmozgás alapján ismeri fel a kimondott szavakat, ezáltal lehetővé teszi a beszédfelismerést akár zajos környezetben is.

A készüléket Laxmi Pandey, Ahmed Sabbir Arif és Gulnar Rakhmetulla alkotta meg. Arif elmondta, hogy amikor az emberek beszélnek egymással, akkor számos félreértésre van lehetőség, különösen, ha a kommunikáció hangos környezetben vagy beszédzavarral küzdő személyek között zajlik. A LipType azonban minden esetben működik és Arif szerint ideális olyan felhasználóknak, akik nyilvános helyen tartózkodnak, de szeretnének a beszélgetőpartnerüknek valami bizalmas dolgot elárulni, s nem kell tartaniuk attól, hogy kihallgatják őket. Az eszközzel gyakorlatilag hangtalanul beszélhetnek, hiszen elegendő, ha a szavakat az ajkaikkal formálják meg, azokat nem kell hangosan kimondaniuk. A szájmozgásokat egy kamera rögzíti, majd azokat egy minden egyes egyén esetében individuálisan edzett szoftver elemzi ki, később pedig átülteti egy digitális kódba. Az utóbbi lefordítható annak az adott készüléknek a nyelvére, amelyet az illető kezelni szeretne. Ez az eszköz általában egy számítógép. De az is felmerülhet, hogy egy olyan megoldást csatlakoztatnak a rendszerhez, amely a digitális kódot ismét kimondott szavakká alakítja át. Laxmi Pandey és Gulnar Rakhmetulla rámutatott, hogy ilyen esetben akár a némák is verbálisan kommunikálhatnak.

Az első tesztek során a szakemberek arra voltak kíváncsiak, hogy mennyire precízen valósítható meg a szájmozgások digitális nyelvbe való átkonvertálása és hogy ez a folyamat milyen gyorsan megy végbe. Arif közölte, hogy a hallgatók és többi résztvevő többsége a tesztek után azt mondta, hogy szívesen használna egy ilyen készüléket. A LipType lehetővé teszi, hogy a fogyatékkal élő felhasználók a mobiltelefonjaikat és más eszközeiket beszédparancsokkal ugyanúgy kezelhessék, mint az egészséges társaik.