Члан

Ево како Куалцомм планира да заувек промени мобилну фотографију

protection click fraud

Фотографија паметних телефона заиста је напредовала у последњих неколико година, али видео није нужно толико напредовао. На пример, имамо 8К видео, што је сјајно, али битрате је и даље прилично ограничен, наравно, јер радимо са ограниченим хардвером. Да ли можемо да очекујемо неки велики искорак нарочито на видео страни?

Хеапе: Видео је много изазовнији због брзине преноса података и резолуција које пролазе кроз ИСП (процесор сликовних сигнала). За Снапсхот, наравно, увек можете обрађивати ствари у позадини или имати мало кашњења до фотографије појављује се у галерији, али са видео записом имате заиста строге временске рокове које морате испоштовати за сваки појединачни Рам. Важно је да се видео снима у хардверу и да је оптимизован за напајање како се телефон не би топио у руци када, на пример, покушавате да снимате видео записе 8К30.

Већ сам говорио о спајању три камере, где можете неприметно зумирати од ултрашироког до широког до телефото снимка. То ће бити побољшано како би било углађеније и лакше за контролу у будућим ревизијама. Наравно, такође желимо да учинимо много посла на побољшању ХДР искуства у видео запису, тако да цео систем може да користи иновације које се појављују у сензорима слике за израду четвороструког ХДР заслона заснованог на ЦФА (низ филтера у боји), ХДР у више корака ХДР... то су заиста лепе карактеристике које не утичу само на квалитет снимака, већ и на видео снимљени ток и тражило.

Што се тиче обраде пиксела, такође ћемо у будућности посветити више хардвера за видео. У прошлости смо радили ствари попут локалне компензације покрета како бисте могли да се носите са буком, а не само са померањем и глобалним покретним објектима, али и са објектима који се крећу локално у оквиру Рам. Такође користимо наше моторе дубине и покрета да бисмо радили ствари попут бокеха у видеу, што може да се уради у било ком тренутку резолуцији, а у далекој будућности ћемо размотрити разумевање садржаја у видео запису и шта све пиксел је.

На ово сам алудирао и раније када је Морпхо говорио о семантичкој сегментацији; када камера разуме пикселе, било да се ради о кожи, тканини, трави, небу итд., то су врсте разумевања која помажу у обради тих различитих пиксела због фактора као што су боја, текстура и бука. У будућности ћемо ово радити не само за Снапсхот, већ и за видео.

Мислим да је први видео бокех ефекат који сам видео био на ЛГ Г8 прошле године. Можда није било на нивоу снимања фотографије у портретном режиму, али је ипак било импресивно. Наравно, Гоогле-ова линија Пикел може да ради невероватне ствари попут семантичке сегментације и различитих њених ноћних режима.

Много тих функција желимо да преместимо на видео; то је логичан следећи корак. Али видео је већ проблем са напајањем, посебно ако снимате, рецимо, 8К30 или 4К120, па их додајте карактеристике поврх већ сасвим засићеног термалног буџета је изазов, али на томе радимо у будућност.

И са друге стране тога, на какав напредак Куалцомм ради на страна фотографије у погледу карактеристика попут портретног режима и других врста креатива режими снимања?

Сада заиста гледамо на то да проширимо свој досег за камеру на хетерогено рачунање и осигуравајући да камера заиста повезује и беспрекорно комуницира са укљученим АИ мотором Снапдрагон. За фотографије, оно што ћете видети да у будућности радимо више је коришћење АИ за ствари попут изоштравања и можемо да добијемо заиста добре перформансе за решавање бука, али очување детаља при слабом осветљењу, изнад онога што можете да урадите традиционалним техникама попут стандардних типова филтера које сви имају користи.

„Нећете морати да бринете о ретуширању фотографија, АИ механизам ће се побринути да буду потпуно оптимизоване у будућности.“

Још једно подручје које сам се дотакао код видеа је ХДР. Користићемо АИ мотор заједно са снимљеним фотографијама да одаберемо најбоље делове сцене. Дакле, ствар коју бисмо могли да урадимо у АИ за аутоматско прилагођавање слике је интелигентан ретуш, при чему вршимо обраду свесних садржаја за тонски садржај, садржај сенки, осветљења и боје.

То је нешто за шта мислимо да ће бити заиста моћно; нећете морати да бринете о ретуширању својих телефона, АИ мотор ће се побринути да буду потпуно оптимизовани у свим тим областима.

Треће подручје о којем људи не морају нужно размишљати је откривање лица. У прошлости смо користили традиционалније технике када је камера активна за откривање лица и заправо покреће начин на који камера ради. Када камера види да је на слици лице, користи то лице за управљање неким ставкама у процесу 3А. Помоћу лица може да утврди да ли имате праву експозицију или лице може да буде аутоматска тачка аутофокуса.

У будућности мислим да ћемо користити приступ дубљег учења, где можемо да користимо наш АИ механизам за прецизније откривање лица и са мање лажних позитивних резултата. Моћи ћемо бити много флексибилнији у одређивању да ли су лица уочљива у различитим оријентацијама, удаљеностима итд.

На мојем Сони а7 ИИИ постоји функција која вам омогућава да фотографишете одређено лице и да му то кажете камера да би се та особа од интереса поставила за ствари попут аутофокуса, чак и када су друга лица у пуцањ. Да ли је то нешто што бисмо могли да видимо у телефону у будућности?

То можете учинити прилично лако са АИ-јем, а да не улазите дубоко у сигурност и ствари које морате учинити да бисте препознали лица за ствари попут плаћања и откључавања телефона. У основи то можете учинити само у камери и знати да ли је то лице А или лице Б - не нужно ако је то лице које треба да откључа телефон, већ само лице од интереса. То је све могуће, а биће могуће и са тим надограђеним мотором који ћемо радити за дубоко учење откривања лица.

И само морам да питам. Цанонов недавно најављени ЕОС Р5 очигледно може да сними 8К видео, али мени је занимљивија његова способност да сниме узорковане 4К у камери, што кондензује информације из 8К изворних снимака да би постигао оштрији 4К видео, без потребе да то радите сами у посту и бавите се огромним величинама датотека од 8К. Да ли је то нешто што бисмо у неком тренутку могли видети на телефонима или се ово враћа на ограничења у вези са грејањем и брзином протока?

То је добро питање. То би нешто могли да ураде наши ОЕМ произвођачи; наравно, нудимо изворне режиме за снимање у 4К и 8К, али с обзиром на то да је 8К такође прилично гладан, сигурно је могуће извршити конверзију нагоре или надоле. Једна од ствари - можда и обрнути проблем - коју такође радимо је интелигентно надограђивање видео записа.

Данас на страни са фотографијама можете да користите више оквира да бисте створили више пиксела и добили слику гушће резолуције, али исто је могуће и у видео запису. Можете да снимате у нижој резолуцији и да користите благе покрете фотоапарата од кадра до кадра, чак и да претворите чак 3 пута без осетне деградације.

Такође сам желео да питам о додатним трошковима када је у питању Куалцомм који подржава толико различитих врста паметних телефона различитих произвођача, и испуњавајући различите захтеве сваког од њих, јер компаније покушавају да се разликују кроз јединствене карактеристике фотоапарата. Поготово сада када видимо више камера на готово сваком телефону, без обзира на цену - то мора да има много разлога за бригу.

То је! Будући да је камера толико важна карактеристика, сваки ОЕМ жели да разликује своје камере. Тако ће Куалцомм објавити хардверску платформу и софтвер за камеру који имају мноштво могућности, али наравно, један ОЕМ жели да се разликује од другог ОЕМ-а. Дакле, они бирају различита сочива, различите сензоре слике, а сензоре другачије распоређују са предње и задње стране додају ствари попут сензора дубине или ласерског фокуса или макронаредбе камере ...

Многи купци желе да разликују и софтвер. Можда желе да направе сопствени алгоритам; да самостално обављају одређену функцију у камери; желе да мало побољшају начин на који се ради нешто попут Демосаиц-а.

„Имамо заиста јаку мрежу независних добављача које заиста негујемо.“

Дакле, изазов који имамо је сервисирање свих тих прилагођавања и диференцијација, али имамо заиста добар системски тим и инжењерски тим купаца чији је посао 24/7 да осигурају да су купци успешни и могу да интегришу своје Карактеристике.

Једна ствар која Куалцомм заиста издваја од осталих произвођача који пружају ИП камере је то што имамо заиста јаку мрежу независних добављача који заиста негујемо и желимо да будемо сигурни да када имамо независног добављача који можда ради са купцем, сви радимо заједно.

Када ступимо у контакт са ОЕМ-ом, а они са трећом страном попут Морпхо-а или АрцСофт-а, трећа страна је у директном контакту са нама. Дакле, ако желе да ураде нешто са троструким камерама или АИ, сарађиваћемо са том трећом страном како бисмо били сигурни да имају најновије и најбоље развојне платформе, основни софтвер и АПИ-је и да имају могућност да искористе наше хардверске блокове, како унутар тако и изван њега. Камера.

Андроид Централ Подцаст # 452: Разговор са Куалцоммом

Нешто што би трећа страна могла да уради у ЦПУ-у, они би могли открити да то могу учинити са нижом снагом ако искористе неки блок у нашем ИСП-у или у нашој рачунарској визији - нашем ЕВА механизму. Можда ако преместе алгоритам са ЦПУ-а на ДСП, попут ХВКС (Хекагон Вецтор Ектенсионс) мотора, можда ће добити боље перформансе и мању снагу. Уско смо у контакту са сваким ИСВ-ом (независним добављачем софтвера) у нашој независној мрежи како бисмо били сигурни да су сва решења која осмислимо како бисмо помогли ОЕМ-у да се прилагоде исто тако поједностављена и мала снага могуће.

Нека врста огранка од тог питања, како уравнотежујете Куалцоммове скупове карактеристика и оне датог клијента? Враћајући се Гоогле-у, волео бих да видим да Пикел 4-ин астрофотографски режим долази на друге телефоне, али где подвлачите црту и препуштате такав развој ОЕМ-у?

То је стална врста ствари о којој размишљамо. Како то уравнотежујемо? Како допуштамо да се наши ОЕМ и ИСВ разликују у односу на то са којим ћемо карактеристикама изаћи основне линије које могу бити доступне свима и заузврат уклањају ту разлику са неких специфичних ОЕМ произвођачи? Мислим да је наша покретачка снага две ствари. Све што сматрамо да ће побољшати искуство рада камере и потиснути цео екосистем напред, желимо томе приступити из перспективе корисничког искуства у целој индустрији.

Дакле, ако постоји одређена карактеристика за коју верујемо да ће користити свима и заиста више погурати цео систем мобилних камера ка нечему попут камере без огледала, интегрираћемо то. Друга ствар коју гледамо је квалитет слике. Ако је то нешто што ће посебно утицати на оцене квалитета слике, на пример, независне куће за пример, попут ДкОМарка, на пример, желимо да имамо ту могућност у кући. За ствари попут зумирања или смањења шума, бољег откривања лица, сегментиране обраде, ХДР-а и тако даље, све су то ствари које мерено у индустрији, па желимо да будемо сигурни да понуда коју пружамо свим нашим купцима има она подручја која су оптимизована колико и они може бити.

Дакле, то су два покретачка фактора; не желимо да крочимо на прсте наших купаца и наше независне мреже која можда жели да иновира, али с друге стране, ако то заиста гура цео екосистем напред или ако утиче на нешто попут ДкОМарк резултата, заиста желимо покушати да понудимо то свима да померају све напред.

Раније сте споменули како Куалцомм жели да побољша неприметни прелаз између сочива док увећавате и умањујете приказ. Управо сам направио ретроспективни преглед прошлогодишњег Галаки Ноте 10 и још увек сам био импресиониран колико је слика конзистентна на сваком објективу. Постоје мале разлике, наравно; нарочито ултрашироко брже испухује врхунце, али боје су заиста уочљиве, и иако постоји делић секунде кашњења током преласка између сочива, врло је импресивно. Узбуђена сам кад видим да се то још више побољшава.

То није лако. Имате три различита сензора слике, а то обично нису ни исти тип сензора слике. Имате више сочива, морате да подесите те камере тако да боја буде тачкаста; да су прелаз фокуса и експозиција исти; баланс белог је исти; боја је иста; основна подешавања текстуре и буке су иста... у супротном, ваше око ће то видети. Заиста је добро покупити ове дисконтинуитете.

Покушавамо да уградимо све више и више кука у хардвер, тако да се то лако може постићи током преласка, а када прелазите са широког на ултраширок, не ради се само о подударању тих параметара. Такође се ради о томе када сте на тој прелазној тачки, где сте рекли да постоји мало кашњење; такође се догађа фузија између те две слике како би се осигурало да су оријентација и распоред тих слика мртви, а то је заправо урађено у реалном времену помоћу хардверског блока у ИСП-у који управља оријентацијом и кривљењем како би се те две слике поређале савршено.

Пуно је тога, посебно у оним заиста малим транзиционим регионима где желите да буде изузетно глатко; иза тога стоји много хардвера који то чини.

Ово су најбоље бежичне слушалице које можете купити по свакој цени!
Време је да пресечете кабл!

Ово су најбоље бежичне слушалице које можете купити по свакој цени!

Најбоље бежичне слушалице су удобне, звуче сјајно, не коштају превише и лако се ставе у џеп.

Све што треба да знате о ПС5: Датум изласка, цена и још много тога
Следећа генерација

Све што треба да знате о ПС5: Датум изласка, цена и још много тога.

Сони је званично потврдио да ради на ПлаиСтатион 5. Ево свега што до сада знамо о томе.

Нокиа лансира два нова буџетска Андроид Оне телефона испод 200 долара
Нови Нокиас

Нокиа лансира два нова буџетска Андроид Оне телефона испод 200 долара.

Нокиа 2.4 и Нокиа 3.4 су најновији додаци буџетској линији паметних телефона компаније ХМД Глобал. С обзиром да су оба Андроид Оне уређаја, гарантовано ће добити две главне исправке ОС-а и редовна безбедносна ажурирања до три године.

Најбољи преносни инстант штампачи фотографија за Андроид уређаје
Штампајте у покрету!

Најбољи преносни инстант штампачи фотографија за Андроид уређаје.

У покрету сте и стварате успомене на мобилном телефону. Иако је дигитал одлично, зашто не бисте покушали те успомене учинити мало трајнијим помоћу опипљиве фотографије?

instagram story viewer