Sony tehisintellekti toega andurid on nutitelefoni kaamerate tulevik

Allikas: Jerry Hildenbrand / Android Central

Selle nädala alguses Teatas Sony kaks uut IMX-pildisensorit, mis "nutika" pildistamise osas kõike muudavad.

See on tõesti julge avaldus, kuid see on ka lihtne ennustada, kuna nutitelefonid ja muud nutikad tooted kasutavad oma kaameraid. Eeldate, et suurem "päris" kalli objektiiviga kaamera teeb suurepäraseid fotosid, kuna kasutatav riistvara muudab selle lihtsamaks. Kuid kui kasutate pisikest andurit pisikeses seadmes ja fikseeritud objektiivis, pole teil raske tõstmise jaoks kallist optikat. Selle asemel kasutatakse selliseid asju nagu tehisintellekt ja see teebki Sony uued sensorid eriliseks: neil on anduripaketti sisse pandud väike tehisintellekti protsessor.

Neil anduritel pole telefoni ega ühegi tarbekaubaga mingit pistmist. Need on mõeldud tööstuslike ja masinnägemisseadmete tootmiseks ning sellised ettevõtted nagu Amazon väljendas huvi, sest kõik-ühes lahendus tähendab, et sellesse on sisse ehitatud palju kulusid toote. Kuid nagu kõik asjad, muutuvad andurid väiksemaks ja odavamaks - praegu maksab IMX umbes 90 dollarit - ja lõpuks leiate need kodustest valvekaameratest, kehakaameratest ja isegi oma nutitelefon.

Tehisintellekt on nutitelefoni fotograafia häälestanud millekski hämmastavaks.

Tehisintellekt on meie nutitelefoni kaamerate puhul suur asi, kuid keegi ei räägi kunagi selle põhjusest. See on OK, sest meie silmad võivad meile öelda, et tehisintellekti abil töötavad "pildiõmbesüsteemid" muudavad meie pildid palju paremaks kui mõne aasta tagused telefonikaamerad. Kuid väike teadmine, kuidas on alati hea.

Kaamerasensor on vaid tükk elektroonikat, mis suudab koguda valguse värvi ja intensiivsust. Kui avate kaamerarakenduse, hakkab andur neid andmeid koguma ning katikut puudutades haaratakse see ja saadetakse teisele riistvarale, mis muudab andmed fotoks. See tähendab midagi, kusagil tuleb konverteerimise jaoks programmeerida.

Allikas: Sony Electronics Inc.

Kui tehisintellekt tuleb segamini, tuleb teisendusprotsessile lisada või teisendada täiendavaid või isegi olematuid andmeid. Tehisintellekt aitab hõivatud taustal tuvastada meie juuste kontuuri. See suudab hinnata stseenis kõige kaugust, sest ta "teab", kui suur üks asi on. See võib võtta andmeid mitmest pildistamisest ja neid kombineerida, et hämaras fotosid paremaks muuta. Kõik digitaalkaamerad kasutavad tehisintellekti ja telefonikaamerad kasutavad seda palju.

Sony uute andurite abil minnakse nutika elektroonika keskmisest kihist välja, kuna paketti on sisse ehitatud tehisintellekti toega pildiprotsessor. See võib tähendada, et tõeliselt hea foto saab otse ekraanile edastada, kuid mis veelgi olulisem, see tähendab, et väljund ei pea olema üldse foto.

Tehisintellekti abil töötav pildisensor tähendab, et väljund ei pea olema üldse pilt.

Sony näited selle sensori kasutamise kohta näitavad, et üksus ja an Amazon Go poodi saab jälgida riiulilt kohast kuni klientide kätte - kauplust külastavate inimeste jooksva arvuga kaubanduskeskust saab hoida või koer sensori ees võib öelda teisele tarkvarale, et koera ees on andur.

Selliste seadmete tootmisel, saatmisel ja muul viisil on lugematu arv juhtumeid kommertsrakendus, kus kaamera "nägemise" andmed on sama olulised (või rohkem) kui pilt see näeb. Sõidetud auto, kasutatav pliiats, isegi telefon, mida hoiate, kasutab osade sorteerimiseks või defektide leidmiseks kogu kasutatud masina nägemist. Kuid meie jaoks on huvitav, kuidas see telefoni sees toimiks.

Allikas: Sony Electronics Inc.

Nagu mainitud, teeb teie telefon seda kõike juba. Apple, Googleja Huaweil on abiks spetsiaalne riistvara, kuid teie telefoni toitev kiip on ISP-ga (pildisignaal Protsessor), mis tugineb suuresti ka tehisintellektil, tehes täpselt samu asju nagu Sony uued kaamerasensorid tehes.

Samsungi telefonid teevad tõesti suurepäraseid "tavalisi" fotosid. Tegelikult on see enam kui piisav kellelegi. Kuid kui hakkate pikslit piiluma, leiate, et Apple, Google ja Huawei telefonid teevad natuke paremad fotod. Neil võivad olla tõepärasemad värvid, nad saavad paremini tuvastada servi, mis muudab fotod teravamaks, ja isegi mitte portreerežiimis tehtud kaadritel on parem sügavustaju.

Veel: Parim Androidi kaamera 2020. aastal

Allikas: Ara Wagoner / Android Central

Seda seetõttu, et Samsung kasutab ühte Interneti-teenuse pakkujat, ehkki a väga heaanduriandmetest foto ehitamiseks, teised kasutavad Interneti-teenuse pakkujat koos spetsiaalse riistvaraga, mis kasutab tehisintellekti protsessi täpsemaks muutmiseks. Samsungi pildid on suurepärased ja kõik, kes väidavad, et need näevad halvad välja, pole ehtsad. Kujutage ette, mida Samsung saaks teha lisakihiga tehisintellekti ja andmekogumisega selle ISP häälestuse peal, mida ta praegu teeb.

Nüüd tehke see samm edasi ja kujutage ette, milline on selline ettevõte nagu Motorola või OnePlus - mille olemasolu pole täpselt teada uskumatud kaamerad - saab hakkama lisakihiga pilditöötlusega, mis toimub kohapeal seadmes, mis ei lisa üldkulusid protsess.

Täna on Sony uued andurid huvitatud suurtest ettevõtetest, kellel on suured hooned, mis on seadmeid täis. Lähitulevikus oleme ka sina ja mina, sest see idee tilgub alla.