Źródło: Google
Co musisz wiedzieć
- Project Starline to nowy sposób na zdalne łączenie się z ludźmi poprzez zapewnienie poczucia bycia z nimi, znanego jako telepresense.
- Stoisko wykorzystuje wyświetlacz 8K z matrycą soczewek przypominającą barierę paralaksy do wyświetlania obrazów 3D bez użycia okularów.
- Ruch i dźwięk użytkownika są śledzone przez 3 „pody”, które służą do renderowania realistycznej wersji 3D osoby do transmisji bezprzewodowej.
Kiedy ogłosił Google Projekt Starline z powrotem na Google I/O 2021 w maju nikt nie miał złudzeń, że technologia, która za tym stoi, jest prosta. Nowy biały papier opublikowane przez badanie Google, zauważone przez 9do5Google, szczegóły tylko Jak skomplikowana technologia jest w rzeczywistości.
Wszystko zaczyna się od projektu stoiska, który przypomina znajomą kabinę restauracyjną i zapewnia użytkownikom wygodne miejsce do siedzenia podczas zdalnego spotkania lub rozmowy z innymi ludźmi. Google twierdzi, że wybrał projekt siedzący przede wszystkim w tym celu.
Ponieważ wygoda była najważniejsza dla projektu, Google zdecydowało się opracować technologię, która nie wymaga od użytkowników noszenia niczego — jak żaden z najlepsze gogle VR lub okulary 3D — i nadal widzieć i słyszeć osobę po drugiej stronie tak realistycznie, jak to tylko możliwe.
Google chciał również zapewnić użytkownikom swobodę poruszania się, rozciągania nóg, a jednocześnie pełnego widoku osoby po drugiej stronie od głowy do pasa.
Google zbudowało stoiska Project Starline z możliwością wyświetlania realistycznego odtworzenia 3D osoby po drugiej stronie, wraz z możliwość oglądania ich pod różnymi kątami, utrzymywania kontaktu wzrokowego, a nawet słuchania dźwięku tak, jakby pochodził z usta.
Źródło: Google
Aby to osiągnąć, Project Starline rejestruje i śledzi osoby za pomocą zestawu trzech „kapsuł” — dwóch umieszczonych nad wyświetlaczem po lewej i prawej stronie oraz jednego pośrodku wyświetlacz — który zawiera cztery zsynchronizowane monochromatyczne kamery 1280×1024 pracujące z częstotliwością 120 Hz, z filtrami do blokowania światła bliskiej podczerwieni, dzięki czemu dodatkowe informacje na wyświetlaczu nie są błędnie pobierane w górę.
Pomyśl o tym, jak pilot Wii wariowałby, gdy światło słoneczne wlewało się do pokoju, a szybko zrozumiesz, jak ważne jest blokowanie tego typu światła.
Dolna kapsuła zawiera dodatkową kamerę RGB, która przechwytuje kolor niezbędny do prawidłowego odwzorowania osoby w przestrzeni 3D. W tych kapsułach znajdują się również cztery mikrofony kardioidalne, które pomagają systemowi dokładnie odtworzyć miejsce, z którego dochodzi dźwięk, gdy ostatecznie odtwarza osobę po drugiej stronie.
Źródło: Google
Informacje wizualne i dźwiękowe przechwycone z tych kamer są następnie renderowane na komputerze Lenovo P920 z czterema procesorami graficznymi — to dwa procesory graficzne NVIDIA Quadro RTX 6000 i dwa procesory graficzne NVIDIA GeForce Titan RTX — a następnie przesłane przez Internet za pośrednictwem WebRTC. Zasadniczo, złożony obraz jest tworzony przy użyciu wszystkich obrazów strąków połączonych w jeden duży kawałek.
Renderowane 3D odtworzenie osoby siedzącej na stoisku Projektu Starline umożliwia Google nie tylko wysyłanie obrazu o wyższej jakości niż może być dostarczone za pośrednictwem wideo 2D jako można znaleźć na Zoom, Skype lub FaceTime, ale daje również możliwość przesuwania i obracania modelu 3D, aby stworzyć iluzję trójwymiarowej osoby siedzącej przed ty.
Ten wyświetlacz to niestandardowy 65-calowy panel 8K ze stereoskopowymi soczewkami, który przynajmniej przypomina wyświetlacz z konsoli Nintendo 3DS, który wykorzystuje barierę paralaksy. W przeciwieństwie do bariery paralaksy, która ma mały „słodki punkt”, w którym tworzony jest obraz 3D, soczewki w Projekt Starline służy do wysyłania różnych obrazów do każdego oka, odtwarzając widzenie 3D w całkowicie naturalny sposób sposób.
Można argumentować, że VR może stworzyć podobne doświadczenie pod wieloma względami, ale Google zwraca uwagę, że istniejące zestawy VR nie mają wystarczająco szerokiego pola widzenia i mają problemy z prawidłowym odtworzeniem twarzy, ponieważ zestaw VR blokuje jej całkiem sporo podczas noszenia.
Źródło: Google
Opóźnienia i inne powszechne problemy, które wciąż nękają komunikację internetową, mogą również wpływać na Starline a trochę, ale wygląda na to, że może wykonać lepszą robotę niż to, czego oczekujemy od obecnego wideo 2D rozwiązania.
Projekt Starline był używany przez Google z wielu powodów, w tym on-boarding i spotkania, ale to nie jest jasne, jak szeroko stosowana będzie linia Starline w biurach lub innych obszarach komercyjnych w przyszłości. Na razie obejrzyj oryginalny film z ogłoszeniem Google poniżej, aby zobaczyć go w akcji.
Nie przegap żadnych wiadomości o PlayStation, które wydarzyły się w listopadzie. Przygotowaliśmy dla Was najważniejsze historie do sprawdzenia, takie jak ponowne wydanie Skyrim i test technologiczny Elden Ring.
Grudniowa aktualizacja v35 jest teraz wprowadzana dla Oculus Quest i Meta Quest 2, a wraz z nią pół tuzina nowych funkcji.
Twitter ogłosił aktualizację swojej polityki dotyczącej informacji prywatnych, która zabrania udostępniania zdjęć lub filmów kogoś bez ich zgody.
W samą porę na święta zebraliśmy teraz najlepsze aparaty Google Nest na rynku. Niezależnie od tego, czy chcesz korzystać z kamery bezpieczeństwa w pomieszczeniu, czy na zewnątrz, mamy dla Ciebie ochronę.