Kamery Pixel są świetne z wielu powodów, a jednym z największych jest ich funkcja Night Sight. W tym roku, kiedy Google wypuścił Pixel 4 i 4 XL, uczynił tę funkcję jeszcze lepszą, włączając tryb Astrophotography. W nowym post na blogu, Google zagłębia się w szczegóły, w jaki sposób udało mu się uzyskać tryb fotograficzny, który wcześniej uważano za możliwy tylko dla lustrzanek cyfrowych.
Jeśli nie jesteś zaznajomiony z Night Sight, w prostych słowach sprawia, że zdjęcia w słabym świetle - lub prawie bez światła - wyglądają tak, jakby zostały zrobione przy znacznie większym świetle. Google szczegółowo opisuje proces radzenia sobie z brakiem luminescencji jako takim:
Aby temu zaradzić, funkcja Night Sight dzieli ekspozycję na sekwencję wielu klatek z krótszymi czasami ekspozycji i odpowiednio mniejszym rozmyciem ruchu. Klatki są najpierw wyrównane, kompensując zarówno drgania aparatu, jak i ruch w scenie, a następnie uśrednione, z ostrożnym traktowaniem przypadków, w których idealne ustawienie nie jest możliwe. Chociaż poszczególne klatki mogą być dość ziarniste, połączony, uśredniony obraz wygląda znacznie lepiej.
Jeśli chodzi o fantastyczne zdjęcia gwiazd, które można uchwycić za pomocą Pixela 3 lub nowszego, Google dodał nowy tryb astrofotografii. Podczas gdy zdjęcia w trybie Night Sight można robić, gdy użytkownik trzyma telefon, zdjęcia Drogi Mlecznej będą musiały być robione telefonem na statywie lub opartym o coś.
Niewielu jest gotowych czekać na zdjęcie dłużej niż cztery minuty, więc ograniczyliśmy pojedynczy obraz Night Sight do maksymalnie 15 klatek z maksymalnie 16 sekundami na klatkę.
Podczas robienia tych wspaniałych zdjęć gwiazd prawidłowe kadrowanie ujęcia na ekranie może być pewnym wyzwaniem. Dzieje się tak, ponieważ kiedy otwierasz telefon i przełączasz się na tryb nocny, to, co widzisz na ekranie, jest dobrze - czarne. Po ustawieniu telefonu w miejscu, w którym nie będzie poruszany przez następne cztery minuty i naciśnięciu przycisku migawki, rozpocznie się odliczanie i widok się zmieni.
Verizon oferuje Pixel 4a za jedyne 10 USD miesięcznie na nowych liniach Unlimited
Inną rzeczą, którą Google bierze pod uwagę w przypadku zdjęć przy słabym oświetleniu, są „ciepłe piksele” i „gorące piksele”. Z powodu czegoś, co się nazywa prąd ciemny, co brzmi jak coś z książki o Harrym Potterze, powoduje Czujniki obrazu CMOS widzieć małe ilości światła, nawet jeśli go nie ma. Ten problem staje się poważniejszy w miarę wydłużania się czasu naświetlania zdjęcia. Kiedy tak się dzieje, te „ciepłe piksele” i „gorące piksele” stają się widoczne na zdjęciu jako jasne plamki światła. Oto, jak Google rozwiązuje ten problem:
Ciepłe i gorące piksele można zidentyfikować, porównując wartości sąsiednich pikseli w tej samej klatce i w sekwencji klatek zarejestrowanych dla zdjęcia oraz wyszukując wartości odstające. Po wykryciu wartości odstającej jest ona ukrywana, zastępując jej wartość średnią z sąsiadów. Ponieważ oryginalna wartość piksela jest odrzucana, następuje utrata informacji o obrazie, ale w praktyce nie wpływa to zauważalnie na jakość obrazu.
Gdy zdjęcie nocne zostanie ostatecznie przetworzone, Google dodaje kolejną sztuczkę, aby uzyskać niesamowite zdjęcie - obróbkę nieba. Wiedząc, że obrazy bardzo ciemnych obrazów mogą wydawać się jaśniejsze niż w rzeczywistości i wpływać na interpretację przez widza o porze dnia, w którym zdjęcie zostało faktycznie zrobione - Google ma rozwiązanie. Przetwarzanie nieba skutecznie wie, że niebo powinno wydawać się ciemniejsze na zdjęciu niż na nim, więc ta część została dostosowana bez zmiany części niebędących niebem.
Efektowi temu przeciwdziała się w trybie nocnym, selektywnie przyciemniając niebo na zdjęciach w słabym oświetleniu. Aby to zrobić, używamy uczenia maszynowego do wykrywania, które regiony obrazu reprezentują niebo. Konwolucyjna sieć neuronowa na urządzeniu, wyszkolona na ponad 100 000 ręcznie wykonanych obrazów oznaczone przez obrysowywanie konturów obszarów nieba, identyfikuje każdy piksel na zdjęciu jako „niebo” lub „nie niebo”.