Van egy oka annak, hogy a Pixel 3 a legjobb kamerás telefonként dicsérték. A Google a HDR + csomagban lévő szoftveralgoritmusokat használja a pixelek feldolgozásához, és ha egy kicsit is kombinálják őket a gépi tanulásról, néhány igazán látványos fotó származhat egy olyan telefonról, amelynek normál problémája lehet hardver.
Ezen algoritmusok feldolgozásának elősegítése érdekében a Google a Pixel Visual Core nevű speciális processzort használta, egy chipet, amelyet először 2017-ben láttunk a Pixel 2-vel. Ebben az évben úgy tűnik, hogy a Google a Pixel VIsual Core-ot lecserélte egy Pixel Neural Core nevűre.
Lehet, hogy a Google neurális hálózati technikákat alkalmaz a fényképek még jobbá tételére a Pixel 4-en.
Az eredeti Pixel Visual Core úgy tervezték, hogy segítsen a Google HDR + képfeldolgozásában használt algoritmusoknak, amelyek a Pixel 2-vel és a Pixel 3-mal készített fotókat olyan nagyszerűvé teszik. Néhány gépi tanulási programozást és az úgynevezett számítógépes fényképezést intelligensen kitöltötte a fénykép nem egészen tökéletes részeit. A hatás nagyon jó volt; lehetővé teszi, hogy a polc nélküli kameraérzékelővel ellátott telefon jó vagy jobb képeket készítsen, mint bármely más elérhető telefon.
A Verizon a Pixel 4a-t mindössze 10 USD / hó áron kínálja az új Unlimited vonalakon
Ha a Pixel Neural Core olyan, amilyennek hisszük, az Pixel 4 ismét harcban lesz az első helyért, amikor az okostelefonos fényképezésről van szó. Itt van miért.
Neurális hálózatok
Úgy tűnik, hogy a Google egy neurális hálózati technika alapján modellezett chipet használ a képfeldolgozás javítására Pixel telefonján 2019-re. A neurális hálózat olyasvalami, amit láthattatok már említeni egy-két alkalommal, de a koncepciót nem nagyon magyarázzák. Ehelyett valami Google-szintű számítógépes mumbo-jumbónak tűnhet, amely hasonlít a varázslatra. Nem, és az ideghálózat mögött rejlő ötlet valójában nagyon egyszerű a fejét bebugyolálni.
A neurális hálózatok információkat gyűjtenek és dolgoznak fel, amelyek hasonlítanak az emberi agyra.
A neurális hálózatok az emberi agy után modellezett algoritmuscsoportok. Nem az agy kinézete vagy akár működése, hanem az információ feldolgozása. Az ideghálózat érzékelő adatokat vesz át az úgynevezett gépészlelésen keresztül - a külső érzékelőkön keresztül gyűjtött és továbbított adatok, például egy kamera-érzékelő révén, és felismeri a mintákat.
Ezek a minták vektoroknak nevezett számok. A "valós" világból származó összes külső adatot, beleértve a képeket, a hangokat és a szöveget, vektorokká fordítják, és adathalmazként osztályozzák és katalogizálják. Gondoljon egy neurális hálózatra, mint egy extra rétegre a számítógépen vagy telefonon tárolt dolgok és ezen réteg tetején adatokat tartalmaz arról, hogy mindez mit jelent - hogyan néz ki, hogyan hangzik, mit mond és mikor történt. A katalógus felépítése után új adatok osztályozhatók és összehasonlíthatók.
Egy valós példa segít mindennek értelmesebbé válni. Az NVIDIA olyan processzorokat gyárt, amelyek nagyon jól tudják működtetni a neurális hálózatokat. A társaság sok időt töltött macskákról készült képek beolvasása és másolása a hálózathoz, és miután az ideghálózaton keresztül befejezte a számítógépek klaszterét, minden olyan fényképen azonosítani lehetett a macskát, amelyikben volt. Kis macskák, nagy macskák, fehér macskák, calico macskák, még hegyi oroszlánok vagy tigrisek is macskák voltak, mert az ideghálózatnak annyi adata volt arról, hogy mi a macska.
Ezt a példát szem előtt tartva nem nehéz megérteni, miért akarja a Google kihasználni ezt az erőt egy telefon belsejében. Az a neurális mag, amely képes összekapcsolódni egy nagy adatkatalógussal, képes lenne azonosítani, mit lát a fényképezőgép lencséje, majd eldönteni, hogy mit tegyen. Esetleg a képfeldolgozó algoritmusba továbbíthatják az adatokat arról, hogy mit lát és mire számít. Vagy talán ugyanazokat az adatokat adhatnák az Asszisztensnek egy pulóver vagy alma azonosításához. Vagy talán még gyorsabban és pontosabban lefordíthatná az írott szöveget, mint a Google most.
Nem olyan gondolat, hogy a Google megtervezhet egy kis chipet, amely képes összekapcsolódni egy ideghálózattal és a telefon belsejében lévő képfeldolgozóval, és könnyen belátható, miért akarja megtenni. Nem vagyunk biztosak abban, hogy pontosan mi a Pixel Neural Core, és mire lehet használni, de minden bizonnyal többet fogunk tudni, ha meglátjuk a telefont és a tényleges részleteket, amikor "hivatalosan" bejelentik.