Stworzyli pierścień, który zamienia gesty na słowa. Ten gadżet daje głos osobom niesłyszącym
Naukowcy stworzyli pierścień, który umożliwia tłumaczenie języka migowego i przesłanie tłumaczenia na smartfona. Niewielkie urządzenie zakładane na palec to jedynie początek planów ambitnych inżynierów.
Technologia dała nam świat, w którym za pomocą niewielkiego urządzenia mieszczącego się w kieszeni możemy polecieć na drugi koniec świata i niezbyt martwić się barierami językowymi. Tłumacze online, Obiektyw Google, dostępne na wyciągnięcie smartfona z kieszeni słowniki.
Jednak tego samego przywileju nie mają osoby głuche, bo używanego przez nich języka migowego nie da się tak łatwo przetłumaczyć. Przynajmniej póki co.
SpellRing da osobom niemym głos na miarę naszych czasów
Nadzieję na połączenie dwóch światów - osób głuchych i w pełni słyszących - daje najnowszy projekt SpellRing stworzony przez naukowców z Uniwersytetu Cornella, Uniwersytetu Carnegie Mellon i Uniwersytetu Stony Brook. Niewielkie urządzenie o wyglądzie wręcz garażowego pierścionka jest w stanie "odczytywać" "wymawiane" słowa z dłoni osoby komunikującej się językiem migowym, a następnie przesłać ich treść do smartfona lub komputera.
SpellRing przeznaczony jest do noszenia na kciuku i "odczytuje" komunikaty dzięki niewielkiemu mikrofonowi oraz głośnikowi. Wspólnie oba podzespoły wysyłają i odbierają niesłyszalne fale dźwiękowe, które śledzą ruchy dłoni i palców użytkownika, podczas gdy mini żyroskop śledzi ruch ręki.
O tym, jaki ruch odpowiada jakiemu słowu SpellRing wie dzięki uczeniu maszynowemu. Proces uczenia maszynowego został przeprowadzony dzięki uprzejmości 20 osób znających język migowy w różnym stopniu - od nowicjuszy, po zaawansowanych, wieloletnich użytkowników, którzy podzielili się z amerykańskimi badaczami ponad 20 tysiącami słów.
SpellRing wciąż nie jest idealny, bowiem urządzenie wykazuje ok. 82-92 proc. trafności tłumaczeń, zależnie od stopnia skomplikowania słów. Ponadto projekt został stworzony z myślą o amerykańskim języku migowym i potencjalne implementacje do innych języków będą wymagały ponownego treningu algorytmu.
Zawsze istnieje przepaść między społecznością techniczną, która opracowuje narzędzia, a społecznością docelową, która z nich korzysta. Wypełniliśmy część tej luki. Zaprojektowaliśmy SpellRing dla docelowych użytkowników, którzy go ocenili
- powiedział Cheng Zhang, doktor w dziedzinie informatyki i współtwórca SpellRing.
Badacze już zadeklarowali dalsze prace nad urządzeniem. Kolejne etapy pracy nad SpellRing będą obejmowały wdrożenie mikrosonara w okulary, co umożliwi SpellRing odczytywanie mimiki twarzy oraz mowy ciała, co z kolei przełoży się na polepszenie komunikacji za pomocą systemu.
Może zainteresować cię także:
