"Słyszą" to, czego nie mówisz. Te okulary mają sens

Wiele wskazuje na to, że okulary rzeczywistości rozszerzonej będą ważnymi gadżetami w niedalekiej przyszłości. Forma komunikacji z nimi może być jednak różna. Najnowszy pomysł to nieme komendy głosowe.

Komunikacja głosowa jest jedną z najwydajniejszych. Wszak szybciej jest powiedzieć niż napisać. Gdy dookoła jest głośno albo po prostu gdy ma się wokół siebie wielu ludzi, nie jest to jednak rozwiązanie optymalne. Aby zapobiec temu problemowi Ruidong Zhang z Cornell University opracował okulary sonarowe EchoSpeech, które "słyszą" komendy wypowiadane bezgłośnie.

W oprawkach okularów EchoSpeech znalazły się czujniki sonarowe, które rejestrują ruchy ust. Dzięki temu nie tylko nie trzeba wypowiadać słów na głos, ale też nie trzeba kierować na twarz żadnych dodatkowych urządzeń – na przykład telefonu z włączonym aparatem.

Dalsza część artykułu pod materiałem wideo

– Zwykle technologie rozpoznawania niemej mowy są ograniczone do konkretnego zestawu z góry określonych poleceń. Wymagają też często kierowana kamery w stronę twarzy, co nie jest ani praktyczne, ani wygodne – skomentował Cheng Zhang. Jak wyjaśnił…

Opracowany przez niego system potrzebuje tylko kilku minut treningu, polegającego na odczytywaniu serii cyfr. W ten sposób uczy się wzorców mowy użytkownika. Na tej podstawie potrafi później odczytywać niewypowiadane na głos słowa "z około 95-procentową skutecznością".

Wbudowane głośniki emitują niesłyszalne fale dźwiękowe w dół twarzy. Poruszające się usta odbijają te fale, które następnie wracają do mikrofonów. Te "echa" są analizowane w czasie rzeczywistym, co umożliwia systemowi odczytać niewypowiedziane słowa.

Choć to dopiero prototyp, już teraz może pochwalić się 10-godzinnym czasem działania. Autor zadbał też o bezpieczeństwo – żadne dane nie są przetwarzane poza urządzeniami użytkownika. Funkcjonalność EchoSpeech jest kwestią rozwojową – okulary mają umożliwić korzystanie z podstawowych funkcji tego typu urządzeń: to między innymi sterowanie odtwarzaczem, nawigacją i komunikatorami.