Yeni iPhone SE'nin portre modu Pixel Google'ı nasıl aşmaya çalışıyor?

Kaynak: Alex Dobie / Android Central

Bu bir sır değil Google'ın Pixel telefonları Çoğunun yalnızca bir kamera lensi olmasına rağmen, herhangi bir telefonda bulabileceğiniz en iyi kameralardan bazılarına sahip oldunuz. Kameranın gördüklerini harika bir fotoğrafa dönüştürmek için yazılım büyüsüne güveniyorlar ve portre modu veya gece görüşü gibi efektler bu yazılımı daha da ileri götürüyor. Bu mantıklı - Google sonuçta öncelikle bir yazılım şirketidir.

Apple donanım yapar ve insanlara satar. Google çoğunlukla algoritmalar yapar.

Apple, öncelikli olarak bir yazılım şirketi değil, en azından Google ile aynı şekilde değil. Apple daha çok Samsung'a benziyor ve içlerindeki yazılımı düşünmeden insanların satın almak isteyeceği ürünleri geliştiriyor. Ama tıpkı Samsung gibi, Apple'ın kamera oyunu güçlü. Çok güçlü. Bir fotoğraf örneği iPhone 11'den Apple'ın kameralarının ne kadar iyi olabileceğini gösteriyor.

Ve sonra bizde

Bu yeni çip

Kaynak: iMore

İPhone SE içindeki A13 Biyonik işlemci iPhone 11 serisinde bulacağınız işlemcinin aynısıdır. Apple'ın en sonuncusu ve pek çok şeyde gerçekten çok iyi - Makine Öğrenimi, kendi mikro işlemcisiyle tamamlanmış bağımsız bir sinir motoru sayesinde bunlardan biri.

Bu donanım sayesinde Apple, "Tek Görüntü Monoküler Derinlik Tahmini"Bu, yalnızca bir kameranın yakalayabileceği görüntü verileriyle portre fotoğrafları çekebileceğini söylemenin çok karmaşık bir yolu. Gerçekten mi. Uçuş sensörü zamanı yoktur veya LiDAR veya derinliği yakalamayı kolaylaştıracak diğer püf noktalarından herhangi biri, sadece bir kamera lensi.

Daha fazla bilgi: Uçuş Süresi kamerası nedir ve nasıl çalışır?

Bu biraz tanıdık geliyorsa, bunun nedeni Google'ın birkaç yıldır Pixel telefonlarında "sadece" yazılımla çok benzer bir şey yapmasıdır. Nasıl çalıştığı gerçekten çok güzel.

Makine Öğrenimi, pek çok şeyi kapsayabilen geniş bir terimdir. Tek bir mercekten derinlik verisi alma durumunda, veri toplamak için bir sinir ağı kullanıyor, böylece iPhone SE durumunda, şimdilik sadece insanların nasıl görünmesi gerektiğini biliyor. Binlerce, binlerce insanın fotoğrafını besliyorsunuz ve o da desenler bulmaya başlıyor. Gözlerin genel olarak nasıl şekillendiği veya saçın mükemmel bir şekilde pürüzsüz bir çizgiye sahip olmadığı gibi şeyler.

Bu bilgisayar tüm verileri sıkıştırır ve artık bir kişinin ne olduğunu "öğrenmiştir" ve bir kişiyi arka planından ayırabilir. Bunu yapabilen yazılım yığınının yaşamak için biraz alana ihtiyacı vardır, ancak daha da önemlisi, siz ondan bunu yapmasını istediğinizde rutinini yürütmek için işlem gücüne ihtiyaç duyar.

Makineler öğrenemez, ancak yeterince veri beslenirse kalıpları tanıyabilirler.

A13 Bionic'teki özel makine öğrenimi işlemcisi burada devreye giriyor. Pixel'in özel kamera motorlarına çok benzer - Pixel Visual Core ve daha yeni Google Neural Core - makine öğrenimi işlevlerini işlemek için özel bir çip orada ve hazır. İPhone SE'nin kamerasına portre fotoğrafı çekmesini söylediğinizde, sinir işlemcisi devreye girer ve kamera merceğindeki kişi ve kameranın gördüklerini bir görüntüye dönüştüren işlemciye veri beslemesi fotoğraf.

Gerisi oldukça basit. Fotoğrafın insan olmayan kısımlarına hafif bir bulanıklık verilir ve kişi olan kısımları biraz keskinleştirilir. Mükemmel değil ve iki lensli herhangi bir telefon, sinir motoruna daha fazla veri besleyebilir ve çok daha iyi bir fotoğraf oluşturabilir, ancak çoğu zaman portre fotoğrafı gerçekten iyi görünüyor.

Şimdilik sadece insanlar

Kaynak: iMore

Kısa cevap - çünkü Apple'ın şu anda çipi işlemeyi "öğrettiği" tek şey bu. Bir kişinin ana hatları, oldukça ayrıntılı ve çok iyi tanımlanmış bir kenarı olan bir derinlik haritası olarak oluşturulur. Apple, sinir motoruna kaktüsler, şişeler veya köpekler hakkında bilgi vermeye karar verebilirdi, ancak insanlar bizim en çok fotoğrafını çektiğimiz şey, yani her şeyin başladığı yer burası.

Bir kişinin neye benzediğini bir sinir ağına "öğretmek", nihai hedef fotoğrafçılıksa bir Japon balığının nasıl göründüğünü öğretmekten daha iyidir.

Ancak Apple, geliştiriciler için bir API olarak derinlik haritasını da (hem arka plan verileri hem de "insanlar" verileri) ortaya çıkardı. Bu, üçüncü taraf kamera uygulamalarının tıpkı Pixel kameranın yapabildiği gibi portre modunu kullanabileceği anlamına gelir. Sadece bir odak noktası seçin ve bir fotoğraf çekin ve kamera, görebileceklerinin ana hatlarına göre derinlik bilgisi almaya çalışacaktır.

Bazı şeylerde iyi olacak ve diğer şeylerde o kadar iyi olmayacak çünkü insanlar için kullanılana benzer öğrenilmiş bir algoritma yok. Ancak yine de başka şeylerin düzgün portre efektlerini alabilecek ve iyi sonuç verebilecek yeteneklere sahip olması gerekir. Pixel telefonların her yinelemede nasıl daha iyi ve daha iyi hale geldiğini gördük, bu yüzden bunun mümkün olduğunu biliyoruz.

Apple muhtemelen tek bir kamera lensi olan başka bir telefonu piyasaya sürmeyecek ve Google da değil. Ancak Apple'ın algoritmalarına birkaç yıl verin ve iPhone SE, portre fotoğraflarını tek kameralı herhangi bir Pixel telefondan daha iyi veya daha iyi çekebilir. Ve Pixel gibi, öğrendiklerini, iki kat kamera lensinden elde edilen veriyle birleştirerek kullanabilir ve bu Pixel kameraya, parasının karşılığını ciddi bir şekilde verebilir.

Apple ve Google için sırada ne var?

Kaynak: Rene Ritchie / iMore

Giderek daha fazla aynı yazılım yeniliği, işte bu.

Piksel 4 ve iPhone 11 Pro, bize her şirketin bu süper karmaşık algoritmaları kullanarak neler yapabileceğini gösteriyor. çok lensli bir kamera ile tandem ve bu, her şirketin sunduğu ürünlere kıyasla çok büyük bir gelişme. geçmiş. Çalışmak için iki kez veriye sahip olduğunuzda ve verilerin nasıl toplanacağını mükemmelleştirdiğinizde sağ veriler, kamera oluşturmaya gelince gerçekten harika işler yapabilirsiniz.

Ancak bu, her iki şirketin de tek lensli bir kamerayı önemsemeyi bırakacağı anlamına gelmez. Biliyoruz Pixel 4a geliyor ve arkada yalnızca bir kamera olacak ve söylentilere göre iPhone SE + 2020 gerçekten gerçekleşirse, yalnızca tek bir lensle iPhone 8+ yeniden çekim olmasını bekleyin. Tek lensli kamera sistemiyle her gün çekilen milyonlarca ve milyonlarca özçekimden bahsetmiyorum bile.

Her iki şirketteki yazılım mühendisleri ve makine görme uzmanları, ellerinden geleni "çift veri" ikisinden öğrenmeye çalışacaktır. lensler toplayabilir ve iPhone SE ve Pixel 4a kameraları (muhtemelen) bu şekilde çok iyi. Ve tüm bu verilerle ışık toplamayla ilgili yeni şeyler keşfedecekler.

Her işletim sistemi güncellemesi, kameraları daha iyi hale getirecek ve öne bakan kameralara da iyileştirmeler getirecektir. Gerçek mucizeler beklemeyin, ancak bundan üç yıl sonraki sonuçlar oldukça harika olacak!