Kako novi iPhone SE portretni način pokušava nadmašiti Google Pixel

Izvor: Alex Dobie / Android Central

Nije tajna da Googleovi Pixel telefoni imali neke od najboljih kamera koje ćete naći na bilo kojem telefonu, iako većina njih ima samo jednu leću kamere. Oslanjaju se na softversku magiju kako bi ono što vidi fotoaparat pretvorili u izvrsnu fotografiju, a efekti poput portretnog načina ili noćnog prizora taj softver još više podižu. Ima smisla - Google je, na kraju krajeva, prvenstveno softverska tvrtka.

Apple izrađuje hardver i prodaje ga ljudima. Google uglavnom izrađuje algoritme.

Apple primarno nije softverska tvrtka, barem ne na isti način kao što je Google. Apple je više poput Samsunga i gradi proizvode koje ljudi žele kupiti bez razmišljanja o softveru koji se nalazi u njima. No, baš kao i Samsung, i Appleova igra s kamerama je jaka. Vrlo jak. Uzorak fotografija s iPhonea 11 pokazuje koliko Appleove kamere mogu biti dobre.

A onda imamo novi iPhone SE. Budimo iskreni - to je

Taj novi čip

Izvor: iMore

The A13 Bionic procesor unutar iPhone SE-a je isti procesor koji ćete naći u iPhoneu 11 serije. To je najnoviji Apple i uistinu je dobar u mnogim stvarima - Strojno učenje je jedna od tih stvari zahvaljujući samostalnom neuralnom stroju u kompletu s vlastitim mikroprocesorom.

Zbog ovog hardvera, Apple je mogao uključiti ono što naziva "Procjena dubine monokularne slike na jednoj slici"što je vrlo složen način da se kaže da može snimati portretne fotografije samo s onim slikovnim podacima koje jedna kamera može snimiti. Stvarno. Nema vremena leta senzora ili LiDAR ili bilo koji drugi trik koji bi olakšao snimanje dubine, samo objektiv jedne kamere.

Više: Što je vremenska kamera i kako funkcionira?

Ako ovo zvuči pomalo poznato, to je zato što Google već nekoliko godina radi nešto vrlo slično sa "samo" softverom na svojim Pixel telefonima. Kako to stvarno funkcionira, stvarno je super.

Strojno učenje široki je pojam koji može obuhvatiti puno stvari. U slučaju dobivanja podataka o dubini iz jedne leće, on koristi neuronsku mrežu za prikupljanje podataka kako bi znao kako bi stvari - u slučaju iPhonea SE, zasad samo ljudi - trebale izgledati. Hranite veliko računalo tisućama i tisućama fotografija ljudi i ono počinje pronalaziti uzorke. Stvari poput toga kako su oči obično oblikovane ili kako kosa nema savršeno glatke obrise.

To računalo drobi sve podatke i sada je "naučilo" što je osoba i može odvojiti osobu od njenog porijekla. Komadu softvera koji to može trebati je malo prostora za život, ali što je još važnije, potrebna mu je procesorska snaga da bi prošao kroz svoju rutinu kad god to zatražite.

Strojevi ne mogu naučiti, ali mogu prepoznati obrasce ako im se unese dovoljno podataka.

Tu nastupa namjenski procesor za strojno učenje u A13 Bionic. Slično kao i Pixel-ovi namjenski motori za fotoaparate - Pixel Visual Core i noviji Googleova neuronska jezgra - namjenski čip za obradu funkcija strojnog učenja je tu i spreman. Kad kažete kameri iPhone SE-a da napravi portret, neuralni procesor se uključi i pronađe osoba u objektivu fotoaparata i unosi podatke u procesor koji pretvara ono što kamera vidi u fotografirati.

Ostalo je prilično jednostavno. Dijelovi fotografije koji nisu osoba lagano se zamućuju, a dijelovi osobe blago izoštravaju. Nije savršen, a bilo koji telefon s dvije leće mogao bi unijeti više podataka u neuralni mehanizam i stvoriti puno bolju fotografiju, no najčešće portretna fotografija izgleda stvarno dobro.

Za sada samo ljudi

Izvor: iMore

Kratki odgovor - jer je to sve što je Apple upravo sada "naučio" čip obrađivati. Obrisi osobe stvoreni su kao dubinska karta koja je vrlo detaljna i ima vrlo dobro definiran rub. Apple je mogao odlučiti podučavati neuronski motor o kaktusima, bocama ili psima, ali ljudi su ono što najviše fotografiramo pa stvari tu počinju.

"Podučavati" neuronsku mrežu kako osoba izgleda bolje nego podučavati je kako izgleda zlatna ribica ako je fotografija krajnji cilj.

Ali Apple je također predstavio kartu dubine (i pozadinske podatke i podatke "ljudi") kao API za programere. To znači da aplikacije fotoaparata treće strane mogu koristiti portretni način rada baš kao što to mogu Pixel kamere. Samo odaberite žarišnu točku i snimite fotografiju, a fotoaparat će pokušati najbolje dobiti podatke o dubini na temelju obrisa onoga što može vidjeti.

Bit će dobro u nekim stvarima, a u drugim ne tako dobro, jer ne postoji naučeni algoritam kakav se koristi za ljude. Ali svejedno bi trebalo biti puno sposobnih za postizanje urednih portretnih učinaka drugih stvari i da se oni pokažu dobro. Vidjeli smo kako su Pixel telefoni postajali sve bolji i bolji sa svakom iteracijom pa znamo da je to moguće.

Apple vjerojatno neće objaviti još jedan telefon s jednim objektivom kamere, a nije ni Google. No, dajte Appleovim algoritmima nekoliko godina i iPhone SE mogao bi portretne fotografije snimati jednako dobro ili bolje nego bilo koji Pixel telefon s jednom kamerom ikad. I poput Pixela, može koristiti naučeno u kombinaciji s dvostrukim podacima iz dvostrukih leća fotoaparata i dati Pixel kameri ozbiljan zalogaj za svoj novac.

Što je sljedeće za Apple i Google?

Izvor: Rene Ritchie / iMore

Sve više istih softverskih inovacija, eto što.

The Pixel 4 i iPhone 11 Pro pokazuju nam što svaka tvrtka može učiniti kada koristi ove superkomplicirane algoritme u tandem s kamerom s više leća, a to je ogroman napredak u odnosu na ono što je svaka tvrtka ponudila u prošlost. Kada imate dva puta podatke za rad i usavršili ste način prikupljanja pravo podataka, možete napraviti zaista sjajan posao što se tiče izrade fotoaparata.

Ali to ne znači da će se ijedna tvrtka prestati brinuti o kameri s jednim objektivom. Znamo Pixel 4a dolazi i imat će samo jednu kameru sa stražnje strane, a ako se glasina o iPhoneu SE + 2020 zaista dogodi, očekujte da će to biti iPhone 8+ rehash sa samo jednom lećom. A da ne spominjemo milijune i milijune selfija snimljenih svaki dan sustavom s jednom lećom.

Softverski inženjeri i stručnjaci za strojni vid u obje tvrtke pokušat će naučiti sve što mogu od "dvostrukih podataka" leće mogu sakupljati i vidjeti kako se to može ugraditi u algoritme koji čine iPhone SE i Pixel 4a kamere (vjerojatno) tako vraški dobro. I saznat će nove stvari o prikupljanju svjetlosti sa svim tim podacima.

Svako ažuriranje OS-a poboljšati će kamere i donijeti poboljšanja i na prednjim kamerama. Ne očekujte stvarna čuda, ali rezultati za tri godine trebali bi biti poprilično sjajni!