Google Lens: Alt du trenger å vite

Google Lens var en av de viktigste kunngjøringene av Google I / O 2017-hovedtalen, og en viktig del av Googles Pixel 2-telefonplaner. For Google, et selskap med lang historie innen visuelt søk, er Lens det siste trinnet i en pågående reise rundt datasyn. Dette er en innsats som kan spores tilbake til Google Image Search for mange år siden, og som er en nær slektning av AI som driver Google Photos 'gjenstand for gjenstander og scene.

For øyeblikket snakker Google bare om en "forhåndsvisning" av objektivforsendelse på Pixel 2-telefoner. Men som en del av Google Assistant har Google Lens potensialet til å nå alle Android-telefoner og nettbrett på Marshmallow og opp, la disse enhetene gjenkjenne objekter, landemerker og andre detaljer visuelt (med litt hjelp fra posisjonsdataene dine) og trylle frem handlingsbar informasjon om dem. For eksempel kan du kanskje identifisere en bestemt blomst visuelt, og deretter hente informasjon om den fra Googles kunnskapsgraf. Eller det kan skanne en restaurant i den virkelige verden, og ta opp anmeldelser og bilder fra Google Maps. Eller det kan identifisere et telefonnummer eller en flyger eller et SSID og passord på baksiden av en Wi-Fi-ruter.

Enten det er gjennom et kameragrensesnitt i Google Assistant, eller etter det faktum gjennom Google Foto, styrken på Objektiv - hvis det fungerer som annonsert - vil være den nøyaktige identifikasjonen og muligheten til å gi nyttig informasjon basert på at. Det er da helt naturlig at Lens skal komme innbakt i kameraappen (og selve Photos) på den nye Pixel 2 og Pixel 2 XL smarttelefoner.

Store, store data

Som alle de beste Google-løsningene, er Lens et produkt av AI og data.

Som alle de beste Google-løsningene, er Google Lens forankret i store data. Det er ideelt for Google, med sine enorme reserver av visuell informasjon og voksende sky-AI-infrastruktur. Å gjøre dette umiddelbart på en smarttelefon er et skritt utover å kjøre lignende gjenkjennelsesmønstre på et opplastet bilde via Google Image Search, men prinsippene er de samme, og du kan enkelt tegne en rett linje til Google Lens, som begynner med bildesøk og går gjennom det nå nedlagte Google Beskyttelsesbriller.

Tilbake i 2011 var Google Goggles imponerende, futuristisk og i riktig setting, virkelig imponerende. I tillegg til økt hastighet, går Google Lens et skritt utover dette ved ikke bare å identifisere hva den ser på, men forståelse det og koble det til andre ting som Google vet om. Det er lett å se hvordan dette kan utvides over tid, og knytte synlige objekter i bilder til informasjonen i Google-kontoen din.

Den samme intelligensen ligger i hjertet av Google Klipp, det nye AI-utstyrte kameraet som vet når du skal ta et bilde basert på komposisjon, og hva det ser på - ikke ulikt en menneskelig fotograf. Alt begynner med å forstå hva du ser på.

Potensialet for Google Lens vil bare vokse ettersom Googles evner innen AI og big data øker.

På et mer avansert nivå bygger Googles VPS (visual positioning system) på grunnlaget for Google Objektiv på Tango-enheter for å finne bestemte objekter i enhetens synsfelt, som gjenstander i en butikk hylle. Som vanlige telefonkameraer forbedres, og ARCore blir mer adoptert, det er alle muligheter for at VPS til slutt kan bli en standard linse-funksjon, forutsatt at enheten din treffer en viss grunnlinje for kameraets maskinvare.

Hva kan Google Lens gjøre på Pixel 2?

Google kaller versjonen av Lens på Pixel 2-telefoner for øyeblikket en "forhåndsvisning", og det er åpenbart at selskapet har ambisjoner om Lens langt utover den nåværende implementeringen på disse håndsettene. På 4. oktober 2017 presentasjon, Google demonstrerte å identifisere album, filmer og bøker basert på omslagskunst, og hente e-postadresser fra en flyerannonse.

Det er relativt enkle oppgaver, men igjen, Google vil helt sikkert begynne i det små og unngå fallgruvene som Samsungs Bixby-tjeneste opplevde i de tidlige dager.

Mer: Google Pixel 2 forhåndsvisning

Hvordan er Google Lens annerledes enn Bixby Vision?

På overflaten kan de to produktene virke veldig like - i det minste til å begynne med.

Potensialet for Google Lens vil imidlertid bare vokse ettersom Googles evner innen AI og datasyn blir sterkere. Og kontrasten med en av Samsungs de fleste publiserte funksjonene er ganske sterke. Det koreanske firmaet er fremdeles en relativ nykommer i AI, og det gjenspeiles i den nåværende svakheten til Bixby Vision på Galaxy S8 og Note 8.

Akkurat nå kan Bixby hjelpe deg med å identifisere vin (dårlig), så vel som blomster (noen ganger) og dyr (i varierende grad av suksess) - så vel som produkter, gjennom henholdsvis Vivino, Pinterest og Amazon. Samsung har ikke sitt eget fjell av data å falle tilbake på, og det må derfor stole på spesifikke partnerskap for forskjellige typer objekter. (Tjenesten forteller deg rutinemessig at den "fortsatt lærer", som en advarsel når du først setter den opp.)

Hva mer, mens Samsung kan (og tilsynelatende planlegger å) bringe Bixby til eldre telefoner via programvareoppdateringer, Google kan tenkes å slå bryteren gjennom Assistent og åpne flomportene til alt som kjører Android 6.0 og opp. Begge tjenestene vil kreve litt mer arbeid før det skjer.

Likevel kan alle som har brukt Bixby Vision på en Galaxy-telefon bevitne at det bare ikke fungerer veldig bra, og Google Lens virker som en mye mer elegant implementering. Vi vet foreløpig ikke hvor godt Lens vil fungere i den virkelige verden, men hvis det er i nærheten av like kompetent som Google Photos 'ferdigheter til å identifisere bilder, vil det være noe det er verdt å se frem til.

Vi får mer å si på Google Lens når vi tester det mer detaljert på Pixel 2-telefonene.