Smartfony są niezwykle przydatne iz każdym dniem stają się coraz inteligentniejsze i szybsze. Mimo to nadal mogą sprawiać trudności w nawigacji dla użytkowników z zaburzeniami mowy lub motorycznymi. Niedawno Google wypchnął zaktualizować swój dostęp głosowy funkcja poprawiająca interfejs i ułatwiająca nawigację przy użyciu samego dźwięku głosu. Ale dla użytkowników, którzy mogą nie być w stanie mówić lub nie mogą fizycznie wchodzić w interakcję ze swoim urządzeniem, mały zespół w Google wymyślił rozwiązanie.
Z pomocą uczenia maszynowego i wiedzy logopedy Richarda Cave'a, zespół opracował nową funkcję o nazwie Look to Speak, która może pomóc użytkownikom w łatwiejszej komunikacji z nimi smartfony. Funkcja, która jest częścią Eksperymenty z Google, pozwala użytkownikom wybierać różne frazy, patrząc w lewo lub w prawo. W zależności od tego, gdzie patrzy użytkownik, odpowiedzi będą zawężane, aż do pozostawienia poprawnej frazy. Użytkownicy potwierdzają swój wybór, patrząc poza ekran, lub robią sobie przerwę, spoglądając w górę. Po wybraniu frazy telefon odczyta ją na głos.
Cyberponiedziałek może już się skończył, ale te oferty na Cyber Week wciąż są aktualne
Źródło: Google
Ta funkcja jest prosta i dość intuicyjna. Opiera się na zdolności smartfona do wykrywania, gdzie patrzy użytkownik, co dzieje się całkowicie na urządzeniu, aby chronić prywatność. Jedynym aspektem systemu, który nadal wymaga fizycznej interakcji ze smartfonem, jest zmiana ustawień, takich jak personalizacja fraz i regulacja czułości wzroku. Prawdopodobnie nadal zależałoby to od pomocy pełnosprawnego pomocnika.
„Look To Speak może działać tam, gdzie inne urządzenia komunikacyjne nie mogą się łatwo dostać”
Według członka zespołu, Zedebee Pedersena, podczas opracowywania tej funkcji duży nacisk położono na Access, podobnie jak zespół koncentruje się na „tworzeniu prostych interfejsów dla mniejszych urządzeń, takich jak smartfony, które nie wymagają zewnętrznych elementów sprzęt komputerowy...". Umieszczenie takiego systemu w smartfonie daje niewerbalnym użytkownikom możliwość lepszej komunikacji w wiele sytuacji, w których w innym przypadku byłoby to zbyt trudne, na przykład na zewnątrz lub w transporcie publicznym. A wraz z rozwojem tanie, ale wydajne smartfony w tym roku duży wybór niedrogich opcji sprawia, że dostęp do takiej funkcji jest jeszcze łatwiejszy. Jednak Richard Cave postrzega Look to Speak bardziej jako towarzysza większych dedykowanych systemów.
„Nie zastępujemy tego rodzaju ciężkiej pomocy dla gości, ponieważ jest tam dużo funkcji. Look to Speak jest przeznaczony dla tych ważnych krótkich wiadomości, do których inne urządzenie komunikacyjne nie może dotrzeć ”.
Aby opracować system taki jak Look to Speak, ważne jest, aby uzyskać informacje od użytkowników, dlatego Cave i zespół w Google współpracowali różne społeczności i osoby testujące aplikację, w tym artysta imieniem Sarah, który używa systemu spojrzenia wzrokowego komunikować się. Film pokazuje, jak użytkownik skonfigurowałby system, co wymaga od użytkownika ustawienia ich twarzą do sekcji podświetlonej na ekranie, aby system mógł dokładnie odczytać ich Twarz. Używając systemu, Sarah mogła z powodzeniem używać smartfona do wypowiadania fraz „Nazywam się Sarah” i „Co się dzieje?”. Drugi użytkownik został pokazany przy użyciu Look to Speak, a po tym, jak instruktor poprosił o wypróbowanie, użytkownik pomyślnie odpowiedział „Zróbmy to”.
Funkcja Look to Speak jest dostępna na urządzenia z systemem Android 9.0 lub nowszym. Zainteresowani mogą znaleźć więcej informacji lub wypróbować aplikację pod adresem g.co/looktospeak. Obejrzyj poniższy film, aby zobaczyć, jak Sarah pomogła zespołowi w testowaniu Look to Speak.