Kuidas proovib uus iPhone SE portreerežiim Pixelit Google'ist välja viia

Allikas: Alex Dobie / Android Central

See pole saladus Google'i Pixeli telefonid teil on olnud mõned parimad kaamerad, mida leiate mis tahes telefonist, kuigi enamikul neist on ainult üks kaamera objektiiv. Nad toetuvad tarkvaramaagiale, et muuta kaamera nähtav pilt suurepäraseks fotoks ning efektid, näiteks portreerežiim või öine vaade, viivad selle tarkvara veelgi kaugemale. See on mõistlik - Google on lõppude lõpuks peamiselt tarkvaraettevõte.

Apple valmistab riistvara ja müüb seda inimestele. Google teeb enamasti algoritme.

Apple ei ole peamiselt tarkvaraettevõte, vähemalt mitte samamoodi nagu Google. Apple sarnaneb pigem Samsungiga ja ehitab tooteid, mida inimesed tahavad osta, mõtlemata nende sees olevale tarkvarale. Kuid nagu ka Samsung, on ka Apple'i kaameramäng tugev. Väga tugev. Fotode näidisvõte iPhone 11-st näitab, kui head Apple kaamerad võivad olla.

Ja siis on meil uus iPhone SE. Olgem ausad - see on parema kiibistikuga iPhone 8

See uus kiip

Allikas: iMore

The A13 Bionic protsessor iPhone SE sees on sama protsessor, mille leiate iPhone 11 seeriast. See on Apple'i uusim versioon ja see sobib paljudes asjades hästi - masinõpe on üks neist asjadest tänu eraldiseisvale närvimootorile, millel on oma mikroprotsessor.

Selle riistvara tõttu suutis Apple lisada selle, mida ta nimetab "Ühe pildi monokulaarse sügavuse hindamine"mis on väga keeruline viis öelda, et see suudab portreefotosid pildistada ainult nende pildiandmetega, mida üks kaamera suudab jäädvustada. Tõesti. Lennuanduri aega pole või LiDAR või mõni muu nipp, mis hõlbustaks sügavuse jäädvustamist, ainult ühe kaamera objektiiv.

Veel: Mis on Time-of-Flight kaamera ja kuidas see töötab?

Kui see tundub veidi tuttav, siis seetõttu, et Google on juba mõned aastad oma Pixeli telefonides teinud midagi väga sarnast tarkvaraga "lihtsalt". Kuidas see töötab, on tõesti väga lahe.

Masinõpe on lai mõiste, mis võib hõlmata paljusid asju. Sügavusandmete saamiseks ühest objektiivist kasutab see andmete kogumiseks närvivõrku, et see teaks, millised asjad - iPhone SE puhul praegu vaid inimesed - peaksid välja nägema. Söödate suurele arvutile tuhandeid ja tuhandeid fotosid inimestest ning see hakkab mustreid leidma. Sellised asjad nagu silmade üldine kuju või see, kuidas juustel pole täiesti ühtlast kontuuri.

See arvuti krõmpsutab kõiki andmeid ja on nüüd "õppinud", mis inimene on, ja suudab inimese selle taustast eraldada. Palju tarkvara, mis seda suudab, vajab elamiseks veidi ruumi, kuid mis veelgi olulisem, see vajab töötlemisvõimsust, et oma rutiin läbi viia, kui te seda palute.

Masinad ei saa õppida, kuid nad saavad mustreid ära tunda, kui neile antakse piisavalt andmeid.

Seal tuleb mängu A13 Bionicu spetsiaalne masinõppeprotsessor. Täpselt nagu Pixeli spetsiaalsed kaameramootorid - Pixeli visuaalne tuum ja uuem Google Neural Core - spetsiaalne kiip masinõppefunktsioonide töötlemiseks on olemas ja valmis. Kui käitate iPhone SE kaameral teha portreefotot, lööb närviprotsessor üles ja leiab selle inimene kaamera objektiivis ja edastab protsessorile andmeid, mis muudavad kaamera nähtu a fotograaf.

Ülejäänud on üsna lihtne. Fotoosad, mis pole inimene, on pisut hägusad ja osad, mis on isik, kergelt teritatud. See pole täiuslik ja iga kahe objektiiviga telefon suudaks närvimootorile edastada rohkem andmeid ja luua palju parema foto, kuid enamasti näeb portreefoto tõesti hea välja.

Praegu vaid inimesed

Allikas: iMore

Lühike vastus - sest see on kõik, mis Apple on kiibi praegu töötlemiseks "õpetanud". Inimese kontuur luuakse sügavuskaardina, mis on väga detailne ja millel on väga täpselt määratletud serv. Apple oleks võinud otsustada õpetada närvimootorit kaktuste, pudelite või koerte kohta, kuid inimesed on need, millest me kõige rohkem fotosid teeme, nii et sealt saavad asjad alguse.

Närvivõrgu "õpetamine", kuidas inimene välja näeb, on parem kui see, kuidas kuldkala välja näeb, kui fotograafia on lõppeesmärk.

Kuid Apple paljastas arendajate API-na ka sügavuskaardi (nii taustandmed kui ka inimeste andmed). See tähendab, et kolmanda osapoole kaamerarakendused saavad kasutada portreerežiimi täpselt nagu Pixeli kaamera. Valige lihtsalt fookuspunkt ja klõpsake foto ja kaamera püüab kõige paremini saada sügavusteavet selle põhjal, mida see näeb.

Mõnes asjas saab olema hea ja mõnes teises mitte nii hästi, sest pole olemas ühtegi õpitud algoritmi, mida inimeste jaoks kasutatakse. Kuid see peaks siiski olema piisavalt võimeline muude asjade portreefektide jäädvustamiseks ja nende hea väljaandmiseks. Oleme näinud, kuidas Pixeli telefonid muutusid iga kordusega aina paremaks, nii et teame, et see on võimalik.

Tõenäoliselt ei kavatse Apple ühtegi kaameraobjektiiviga teist telefoni välja anda ja seda pole ka Google. Andke Apple'i algoritmidele paar aastat aega ja iPhone SE suudaks teha portreefotosid sama hästi või paremini, kui ükski ühekaameraga Pixeli telefon seda kunagi tegi. Nagu Pixel, saab ka see kasutada õpitut koos topeltkaamera objektiividest saadud andmete topeltandmetega ja anda sellele Pixeli kaamerale tõsise kulutuse oma raha eest.

Mis saab edasi Apple'ist ja Google'ist?

Allikas: Rene Ritchie / iMore

Üha enam samu tarkvarauuendusi, see ongi.

The Pixel 4 ja iPhone 11 Pro näitavad meile, mida saab iga ettevõte teha, kui kasutab neid ülikeerulisi algoritme tandem koos mitme objektiiviga kaameraga ja see on tohutu edasiminek võrreldes sellega, mida iga ettevõte on minevik. Kui teil on töötamiseks kaks korda rohkem andmeid ja olete andmete kogumise täiustanud eks andmeid, saate kaamera ehitamisel teha suurepärast tööd.

Kuid see ei tähenda, et kumbki ettevõte lõpetaks ühe objektiiviga kaamera hoolimise. Me teame Pixel 4a tuleb ja sel taga on ainult üks kaamera ning kui kuulujutuga iPhone SE + 2020 ka tegelikult juhtub, siis eeldage, et see on iPhone 8+, millel on ainult üks objektiiv. Rääkimata miljonitest ja miljonitest selfidest, mida iga päev ühe objektiiviga kaamerasüsteemiga tehakse.

Mõlema ettevõtte tarkvarainsenerid ja masinnägemisspetsialistid üritavad kahekordsete andmete abil õppida kõike, mis võimalik läätsed saavad koguda ja näha, kuidas seda saab kasutada algoritmides, mis muudavad iPhone SE ja Pixel 4a kaamerad (arvatavasti) nii kuradima hea. Ja nad saavad teada kõigi valguse kogumise kohta kõigi nende andmetega.

Iga operatsioonisüsteemi värskendus muudab kaamerad paremaks ja toob ka esiosa kaameratesse täiustusi. Ärge oodake tegelikke imesid, kuid tulemused peaksid kolme aasta pärast olema päris suurepärased!