Smarttelefoner er ekstremt nyttige og blir smartere og raskere hver dag. Men til tross for det, kan de fremdeles være vanskelig å navigere for brukere med tale- eller motoriske funksjonshemninger. Nylig presset Google en oppdater til Voice Access funksjon som forbedrer grensesnittet og gjør det lettere å navigere med bare lyden av stemmen din. Men for brukere som kanskje ikke kan snakke eller fysisk samhandle med enheten sin, har et lite team hos Google kommet med en løsning.
Ved hjelp av maskinlæring og ekspertisen til tale- og språkterapeut, Richard Cave, teamet har designet en ny funksjon kalt Look to Speak som kan hjelpe brukere å kommunisere lettere med sine smarttelefoner. Funksjonen, som er en del av Eksperimenter med Google, lar brukerne velge forskjellige setninger ved å se mot venstre eller høyre. Avhengig av hvor en bruker ser, blir svarene begrenset til riktig setning er igjen. Brukere bekrefter valgene sine ved å se utenfor skjermen eller ta en pause ved å kikke opp. Når en setning er valgt, vil telefonen lese den høyt.
Cyber Monday kan være over, men disse Cyber Week-tilbudene lever fortsatt
Kilde: Google
Funksjonen er grei og ganske intuitiv. Det er avhengig av smarttelefonens evne til å oppdage hvor en bruker ser, noe som skjer helt på enheten for å beskytte personvernet. Det eneste aspektet ved systemet som fortsatt krever fysisk interaksjon med smarttelefonen, er når en bruker ønsker å endre innstillinger som å tilpasse setninger og justere øyenblikkens følsomhet. Dette vil sannsynligvis fremdeles avhenge av hjelp fra en arbeidsdyktig assistent.
"Look To Speak kan fungere der andre kommunikasjonsenheter ikke lett kan gå"
Ifølge teammedlem Zedebee Pedersen var Access et stort fokus når man utviklet denne funksjonen, og teamet var det fokusert på "å lage enkle grensesnitt for mindre enheter som smarttelefoner, som ikke stole på eksterne deler av maskinvare... ". Å sette et system som dette på en smarttelefon gir ikke-verbale brukere muligheten til å kommunisere bedre i en antall situasjoner der det ellers ville være for vanskelig, for eksempel utendørs eller med offentlig transport. Og med fremveksten av billige, men kraftige smarttelefoner i år gjør det å ha tilgang til en funksjon som denne enda enklere å ha et stort utvalg av billige alternativer. Men Richard Cave ser Look to Speak som mer ledsager til større dedikerte systemer.
"Vi erstatter ikke all denne typen tunge fyrhjelps ting fordi det er mye funksjonalitet der inne. Look to Speak er for de viktige korte meldingene der den andre kommunikasjonsenheten ikke kan gå. "
For å utvikle et system som Look to Speak, er det viktig å få ekte brukerinndata, så Cave og teamet på Google jobbet med forskjellige lokalsamfunn og enkeltpersoner på å teste appen, inkludert en kunstner ved navn Sarah som bruker et øyesynssystem til å kommunisere. Videoen viser hvordan brukeren vil sette opp systemet, noe som krever at brukeren stiller opp sine ansikt til et avsnitt uthevet på skjermen slik at systemet kan ta en nøyaktig lesing av sine ansikt. Ved å bruke systemet kunne Sarah lykkes med å bruke smarttelefonen til å snakke setningen "Mitt navn er Sarah" og "Hva skjer?". En annen bruker ble vist med Look to Speak, og etter at instruktøren ble bedt om å prøve, svarte brukeren vellykket med "La oss gjøre det."
Look to Speak er tilgjengelig for enheter som kjører Android 9.0 og nyere. De interesserte kan finne mer informasjon eller prøve søknaden på g.co/looktospeak. Sjekk ut videoen nedenfor for å se hvordan Sarah hjalp teamet til å teste Look to Speak.