Postoji razlog zašto Pixel 3 je hvaljen kao najbolji telefon s kamerom. Google koristi softverske algoritme unutar svog HDR + paketa za obradu piksela i u kombinaciji s malo strojnog učenja, neke zaista spektakularne fotografije mogu doći s telefona koji može imati standardno izdanje hardver.
Da bi pomogao u obradi tih algoritama, Google je koristio specijalizirani procesor nazvan Pixel Visual Core, čip koji smo prvi put vidjeli 2017. godine s Pixelom 2. Čini se da je ove godine Google zamijenio Pixel VIsual Core s nečim nazvanim Pixel Neural Core.
Google možda koristi tehnike neuronske mreže kako bi fotografije učinio još boljima na Pixelu 4.
Izvorna Vizualna jezgra piksela osmišljen je da pomogne algoritmima koje koristi Googleova obrada HDR + slike što čini fotografije snimljene Pixelom 2 i Pixelom 3 tako sjajnim. Upotrijebio je neko programiranje strojnog učenja i ono što se naziva računalnom fotografijom za inteligentno popunjavanje dijelova fotografije koji nisu bili sasvim savršeni. Učinak je bio stvarno dobar; omogućuje telefonu s gotovim senzorom kamere da fotografira najbolje ili bolje od bilo kojeg drugog dostupnog telefona.
Verizon nudi Pixel 4a za samo 10 USD mjesečno na novim Neograničenim linijama
Ako je Pixel Neuralna jezgra ono što vjerujemo da jest, Pixel 4 ponovno će se boriti za prvo mjesto što se tiče fotografije pametnim telefonom. Evo zašto.
Neuronske mreže
Čini se da Google koristi čip po uzoru na tehniku neuronske mreže za poboljšanje obrade slike unutar svog Pixel telefona za 2019. godinu. Neuronska mreža nešto je što ste mogli spomenuti neko vrijeme ili dva, ali koncept se ne objašnjava često. Umjesto toga, može se činiti kao neki mumbo-jumbo na računalu na razini Googlea koji sliči magiji. Nije, a ideju koja stoji iza neuronske mreže zapravo je prilično lako zamotati glavu.
Neuronske mreže prikupljaju i obrađuju informacije na način koji sliči ljudskom mozgu.
Neuronske mreže su skupine algoritama po uzoru na ljudski mozak. Ne kako mozak izgleda ili čak radi, već kako obrađuje informacije. Neuronska mreža uzima senzorne podatke kroz ono što se naziva strojnom percepcijom - podaci prikupljeni i preneseni putem vanjskih senzora, poput senzora kamere - i prepoznaju uzorke.
Ti su obrasci brojevi koji se nazivaju vektori. Svi vanjski podaci iz "stvarnog" svijeta, uključujući slike, zvukove i tekst, prevode se u vektor i klasificiraju i katalogiziraju kao skupovi podataka. Zamišljajte neuronsku mrežu kao dodatni sloj povrh stvari pohranjenih na računalu ili telefonu i taj sloj sadrži podatke o tome što sve znači - kako izgleda, kako zvuči, što govori i kada dogodilo. Nakon izrade kataloga, novi se podaci mogu klasificirati i usporediti s njim.
Primjer iz stvarnog svijeta pomaže da sve to ima više smisla. NVIDIA proizvodi procesore koji su vrlo dobri u upravljanju neuronskim mrežama. Tvrtka je provela puno vremena skeniranje i kopiranje fotografija mačaka u mrežu i nakon završetka skupa računala putem neuronske mreže mogao je identificirati mačku na bilo kojoj fotografiji koja ju je imala na sebi. Male mačke, velike mačke, bijele mačke, kaliko mačke, čak i planinski lavovi ili tigrovi bili su mačke, jer je neuronska mreža imala toliko podataka o tome što je mačka "bila".
Imajući na umu taj primjer, nije teško razumjeti zašto bi Google želio iskoristiti tu snagu u telefonu. Neuralna jezgra koja je sposobna povezati se s velikim katalogom podataka mogla bi prepoznati što vidi objektiv vašeg fotoaparata, a zatim odlučiti što učiniti. Možda bi se podaci o onome što vidi i što očekuje mogli proslijediti algoritmu za obradu slike. Ili se možda isti podaci mogu poslati Asistentu kako bi identificirao džemper ili jabuku. Ili biste možda mogli prevesti napisani tekst čak brže i preciznije nego što to Google sada čini.
Nije teško razmišljati da bi Google mogao dizajnirati mali čip koji bi se mogao povezati s neuronskom mrežom i procesorom slike u telefonu i lako je shvatiti zašto bi to želio učiniti. Nismo sigurni što je točno Pixel Neural Core ili za što bi se mogao koristiti, ali zasigurno ćemo znati više kad vidimo telefon i stvarne detalje kad bude "službeno" najavljen.