Како портретни режим новог иПхоне СЕ покушава да надмаши Гоогле Пикел

Извор: Алек Добие / Андроид Централ

Није тајна да Гоогле-ови Пикел телефони имали неке од најбољих камера које ћете наћи на било ком телефону, иако већина њих има само један објектив камере. Ослањају се на софтверску магију како би оно што камера види претворили у сјајну фотографију, а ефекти попут портретног режима или ноћног призора тај софтвер још више подижу. Има смисла - Гоогле је, на крају крајева, првенствено софтверска компанија.

Аппле прави хардвер и продаје га људима. Гоогле углавном прави алгоритме.

Аппле није првенствено софтверска компанија, бар не на исти начин као што је то Гоогле. Аппле више личи на Самсунг и прави производе које људи желе да купе не размишљајући о софтверу који се налази у њима. Али баш као и Самсунг, Аппле-ова игра камере је јака. Веома јако. Узорак фотографија са иПхоне 11 показује колико добре Аппле-ове камере могу бити.

А онда имамо нови иПхоне СЕ. Будимо искрени - јесте иПхоне 8 са бољим чипсетом

Тај нови чип

Извор: иМоре

Тхе А13 Биониц процесор унутар иПхоне СЕ је исти процесор који ћете наћи у иПхоне 11 серији. То је најновија компанија Аппле и заиста је добра у многим стварима - машинско учење је једна од тих ствари захваљујући самосталном неуронском мотору у комплету са сопственим микропроцесором.

Због овог хардвера, Аппле је могао да укључи оно што назива "Процена дубине монокуларне слике на једној слици"што је врло сложен начин да се каже да може да снима портретне фотографије само са подацима слике које једна камера може да забележи. Стварно. Нема времена лета сензора или ЛиДАР или било који други трик који би олакшао снимање дубине, само објектив једне камере.

Више: Шта је камера за време лета и како функционише?

Ако ово звучи помало познато, то је зато што Гоогле већ неколико година ради нешто врло слично са „само“ софтвером на својим Пикел телефонима. Како то функционише је заиста, заиста супер.

Машинско учење је широк појам који може обухватити пуно ствари. У случају добијања података о дубини из једног сочива, он користи неуронску мрежу за прикупљање података како би знао како би ствари - у случају иПхоне СЕ-а, само људи за сада - требало да изгледају. Храните велики рачунар хиљадама и хиљадама фотографија људи и он почиње да проналази обрасце. Ствари попут тога како су очи обично обликоване или како коса нема савршено глатке обрисе.

Тај рачунар дроби све податке и сада је „научио“ шта је особа и може да одвоји особу од њеног порекла. Комаду софтвера који то може требати је мало простора за живот, али што је још важније, потребна му је процесорска снага да би прошао кроз своју рутину кад год то затражите.

Машине не могу да науче, али могу да препознају обрасце ако имају довољно података.

Ту наступа наменски процесор за машинско учење у А13 Биониц. Слично као и Пикел-ови наменски мотори за камере - Пикел Висуал Цоре и новији Гоогле Неурал Цоре - наменски чип за обраду функција машинског учења је спреман. Када кажете камери иПхоне СЕ-а да направи портрет, неурални процесор се укључује и проналази особа у објективу фотоапарата и преноси податке процесору који претвара оно што камера види у фотографирати.

Остало је прилично једноставно. Делови фотографије који нису особа добијају благу замућеност, а делови особе су мало изоштрени. Није савршено и било који телефон са две сочива могао би да унесе више података у неуронски мотор и створи много бољу фотографију, али најчешће портретна фотографија изгледа заиста добро.

За сада само људи

Извор: иМоре

Кратак одговор - јер је то све што је Аппле управо сада „научио“ чип да обрађује. Обриси особе створени су као карта дубина која је врло детаљна и има врло добро дефинисану ивицу. Аппле је могао да одлучи да научи неуронски мотор о кактусима, боцама или псима, али људи су оно што највише фотографишемо, па ту ствари почињу.

"Подучавати" неуронску мрежу како особа изгледа боље него подучавати је како изгледа златна рибица ако је фотографија крајњи циљ.

Али Аппле је такође изложио мапу дубине (и позадинске податке и податке „људи“) као АПИ за програмере. То значи да апликације независних фотоапарата могу да користе портретни режим баш као што то може Пикел камера. Само одаберите фокусну тачку и снимите фотографију, а камера ће покушати да најбоље добије информације о дубини на основу обриса онога што може да види.

У неким стварима ће бити добро, а у другим не тако добро, јер не постоји научени алгоритам какав се користи за људе. Али и даље би требало бити довољно способно за снимање уредних портретних ефеката других ствари и показивање добрих резултата. Видели смо како су Пикел телефони постајали све бољи и бољи са сваком итерацијом, тако да знамо да је то могуће.

Аппле вероватно неће објавити још један телефон са једним сочивом камере, а то није ни Гоогле. Али дајте Апплеовим алгоритмима неколико година и иПхоне СЕ могао би да фотографише портрете као добре или боље него било који Пикел телефон са једном камером икада. И као Пикел, може да користи научено у комбинацији са дуплим подацима из двоструких сочива камере и да тој Пикел камери озбиљно донесе новац.

Шта је следеће за Аппле и Гоогле?

Извор: Рене Ритцхие / иМоре

Све више истих софтверских иновација, ето шта.

Тхе Пикел 4 и иПхоне 11 Про показују нам шта свака компанија може да уради када користи ове суперкомпликоване алгоритме у тандем са камером са више сочива, и то је огроман напредак у поређењу са оним што је свака компанија понудила у прошлост. Када имате два пута податке за рад и усавршили сте начин прикупљања јел тако података, можете направити заиста сјајан посао када је у питању израда камере.

Али то не значи да ће иједна компанија престати да брине о камери са једним сочивом. Знамо Пикел 4а долази и имаће само једну камеру позади, а ако се гласина о иПхоне СЕ + 2020 заиста догоди, очекујте да ће то бити иПхоне 8+ рехасх са само једним сочивом. А да не помињемо милионе и милионе селфија који се свакодневно снимају системом једног сочива.

Софтверски инжењери и стручњаци за машински вид у обе компаније покушаће да науче све што могу од „двоструких података“ сочива могу сакупљати и видети како се то може уградити у алгоритме који чине иПхоне СЕ и Пикел 4а камере (вероватно) тако проклето добро. И сазнаће нове ствари о прикупљању светлости са свим тим подацима.

Свако ажурирање ОС-а побољшаће камере и донеће побољшања и на предњим камерама. Не очекујте стварна чуда, али резултати за три године требало би да буду прилично сјајни!