Google Pixel-smartphones har muligvis ikke de mest kraftfulde eller alsidige kameraer med hensyn til hardware, men de kompenserer mere end det for deres brug af software. Google bruger beregnings-AI til at hjælpe med at øge billeder, hvilket gør Pixels til noget af det bedste peg-og-skyde smartphone-kameraer på markedet. Pixel 4a 5G og Pixel 5 begge øgede ante, især med tilføjelsen af den nye Portrait Light-funktion.
Google-detaljer i et blogindlæg hvordan Portrait Light giver brugeren mulighed for at justere retningsbelysningen på et billede, efter at billedet er taget. Det er en funktion, der automatisk anvendes på fotos af mennesker, inklusive Night Sight-skud. Det ligner en studielampefunktion på LG G8, som stod mere på hardware fra Time-of-Flight-sensoren på selfie-kameraet. Googles tilgang til pixel er udelukkende softwarebaseret, afhængig af modeller og maskinindlæring.
VPN-tilbud: Lifetime-licens til $ 16, månedlige planer til $ 1 og mere
Kilde: Google
Googles ingeniører måtte først træne deres model ved at præsentere den med forskellige eksempler på fotos med forskellige lysintensiteter og retninger. Selv modelens hovedposition blev taget i betragtning, hvilket gjorde det muligt for deres model at lære om, hvordan lys påføres på forskellige ansigter og under forskellige forhold.
Under hensyntagen til disse variabler ville modellen gengive kugler baseret på belysningsprofilen på et fotografi, herunder farve, intensitet og retningsretning. Derefter var ingeniører i stand til at bestemme, hvor man bedst kunne anvende syntetisk belysning i et billede ved at anvende almindelig belysningspraksis i fotografering som nøglelys og fyldelys. Men det var kun det første skridt.
Googles ingeniører måtte også demonstrere disse forskellige syntetiske lyskilder, så modellen kunne replikere. For at gøre det benyttede de en Light Stage, som er en sfærisk rig udstyret med over 300 LED-lys og mere end 60 kameraer, der alle er placeret i forskellige vinkler. Ved at fange forskellige mennesker med forskellige køn, hudfarver, ansigtsformer og andre variabler, Googles ingeniører var i stand til at modellere hundreder af forskellige lysforhold ved at tage et andet foto pr. person lys. Uden at komme ind i det nitty-gritty var Google i stand til at bruge oplysningerne fra Light Stage og anvende dem i forskellige simulerede miljøer.
Kilde: Google
Når det blev anvendt til funktionen Portrait Light, var det vigtigt, at genlysningseffekten var så effektiv som muligt. Portrætlys skaber et kort over lysets synlighed og bruger dette til at konstruere en version af billedet i lav kvalitet, når belysningen justeres. Når den er valgt, opskaleres algoritmen og anvendes på det originale højkvalitetsbillede. Dette gør det muligt for modellen at køre problemfrit på din enhed og tage meget lidt plads på lige under 10 MB.
Dybden, som Google løbende forbedrer sin Pixel-kameraalgoritme til, er ret imponerende. Portrait Light anvendes automatisk på fotos taget på Google Pixel 4 og nyere og fungerer også til allerede eksisterende portrætfotos taget ældre Pixel-smartphones som Pixel 2 og nyere. Gå ind i Google Fotos og se, hvordan du kan forbedre udseendet på dine portrætfotos!