Google Pixel-smarttelefoner har kanskje ikke de kraftigste eller mest allsidige kameraene når det gjelder maskinvare, men de gjør mer enn opp for det i sin bruk av programvare. Google bruker beregnings AI for å øke bildene, noe som gjør Pixels til noe av det beste pek-og-skyte smarttelefonkameraer på markedet. Pixel 4a 5G og Pixel 5 begge økte ante, spesielt med tillegg av den nye Portrait Light-funksjonen.
Google-detaljer i et blogginnlegg hvordan Portrait Light lar brukeren justere retningsbelysningen til et bilde etter at bildet ble tatt. Det er en funksjon som automatisk brukes på bilder av mennesker, inkludert Night Sight-bilder. Det ligner på en studiolysfunksjon på LG G8, som stolte mer på maskinvaren til Time-of-Flight-sensoren til selfie-kameraet. Googles tilnærming til Pixels er helt programvarebasert, avhengig av modeller og maskinlæring.
VPN-tilbud: Lifetime-lisens for $ 16, månedlige planer til $ 1 og mer
Kilde: Google
Googles ingeniører måtte først trene modellen ved å presentere den med forskjellige eksempler på bilder med forskjellige lysintensiteter og retninger. Selv modellens hodepose ble tatt i betraktning, noe som tillot modellen å lære om hvordan lys blir brukt på forskjellige ansikter og under forskjellige forhold.
Med tanke på disse variablene ville modellen gjengi kuler basert på belysningsprofilen til et fotografi, inkludert farge, intensitet og retningsretning. Deretter ved å bruke vanlig belysningspraksis i fotografering som nøkkellys og fylllys, kunne ingeniører bestemme hvor de best brukte syntetisk belysning i et bilde. Men det var bare første skritt.
Googles ingeniører måtte også demonstrere disse forskjellige syntetiske lyskildene for at modellen skulle kunne replikeres. For å gjøre det, brukte de en Light Stage, som er en sfærisk rigg utstyrt med over 300 LED-lys og mer enn 60 kameraer alle plassert i forskjellige vinkler. Ved å fange forskjellige mennesker med forskjellige kjønn, hudfarger, ansiktsformer og andre variabler, Googles ingeniører klarte å modellere hundrevis av forskjellige lysforhold ved å ta et annet bilde per person lys. Uten å komme inn i det nisse, kunne Google bruke informasjonen fra Light Stage og bruke den på forskjellige simulerte miljøer.
Kilde: Google
Når det ble brukt på Portrait Light-funksjonen, var det viktig at gjenopplysningseffekten var så effektiv som mulig. Portrait Light lager et synlighetskart for lys og bruker dette til å lage en versjon av bildet av lav kvalitet når du justerer belysningen. Når den er valgt, blir algoritmen oppskalert og brukt på det originale høykvalitetsbildet. Dette gjør at modellen kan kjøre problemfritt på enheten din, og tar liten plass på litt under 10 MB.
Dybden som Google kontinuerlig forbedrer sin Pixel-kameraalgoritme er ganske imponerende. Portrait Light blir automatisk brukt på bilder tatt på Google Pixel 4 og nyere, og fungerer også for eksisterende portrettbilder tatt på eldre Pixel-smarttelefoner som Pixel 2 og nyere. Gå inn i Google Foto og se hvordan du kan forbedre utseendet på portrettbildene dine!