Google odhaluje specifikace projektu Starline a důkaz, že je lepší než Zoom

Zdroj: Google

Když Google oznámil Projekt Starline na květnovém Google I/O 2021 si nikdo nedělal iluze, že technologie za tím je jednoduchá. nový bílý papír publikoval výzkum Google, všiml si 9to5Google, jen detaily jak ve skutečnosti je to složité.

Vše začíná designem kabiny, který je podobný známému restauračnímu stánku a poskytuje uživatelům pohodlné místo k sezení, zatímco se na dálku setkávají nebo konverzují s jinými lidmi. Google říká, že si pro tento účel zvolil především design sedadel.

Vzhledem k tomu, že pohodlí bylo pro design prvořadé, rozhodl se Google vyvinout technologii, která nevyžaduje, aby uživatelé měli cokoli na sobě – jako

Google také chtěl zajistit, aby uživatelé měli svobodu se trochu pohybovat, protahovat nohy a stále mít úplný výhled na osobu na druhém konci od hlavy až k pasu.

Google postavil stánky Project Starline se schopností zobrazit realistickou 3D rekreaci osoby na druhém konci, včetně schopnost vidět je z více úhlů, udržovat oční kontakt a dokonce slyšet zvuk, jako by přicházel z jiné osoby ústa.

Zdroj: Google

Aby toho dosáhl, Project Starline zaznamenává a sleduje jednotlivce pomocí sady tří „podů“ – dvou umístěných nad displejem na levé a pravé straně a jednoho uprostřed pod displejem. displej — který obsahuje čtyři synchronizované 1280×1024 monochromatické kamery pracující při 120 Hz, s filtry pro blokování blízkého infračerveného světla, aby nedocházelo k chybnému výběru dalších zobrazovacích informací nahoru.

Přemýšlejte o tom, jak by se dálkový ovladač Wii zbláznil, když do místnosti zalilo sluneční světlo, a rychle pochopíte důležitost blokování tohoto typu světla.

Spodní pouzdro obsahuje extra RGB kameru, která zachycuje barvu nezbytnou pro správnou replikaci jednotlivce ve 3D prostoru. Čtyři kardioidní mikrofony se také nacházejí v těchto modulech, které pomáhají systému replikovat přesně tam, odkud zvuk přichází, když nakonec znovu vytvoří osobu na druhém konci.

Zdroj: Google

Obrazové a zvukové informace zachycené z těchto kamer jsou následně vykresleny na počítači Lenovo P920 se čtyřmi GPU — to jsou dva GPU NVIDIA Quadro RTX 6000 a dva GPU NVIDIA GeForce Titan RTX – poté odeslané přes internet WebRTC. V podstatě je složený obrázek vytvořen pomocí všech obrázků lusků spojených do jednoho velkého kusu.

Rekreace osoby sedící ve stánku Project Starline ve 3D vykreslení umožňuje společnosti Google nejen posílat kvalitnější obraz, než jaký lze dodat prostřednictvím 2D videa jako najdete na Zoom, Skype nebo FaceTime, ale také poskytuje možnost pohybovat a otáčet 3D modelem a vytvářet iluzi trojrozměrné osoby sedící před vy.

Tento displej je zakázkový 65palcový 8K panel se stereoskopickými čočkami, které mají alespoň přechodnou podobnost s displejem Nintendo 3DS, který používá paralaxovou bariéru. Na rozdíl od paralaxové bariéry, která má malé „sladké místo“, kde se vytváří 3D obraz, čočky v Projekty Starline se používají k odeslání jiného obrazu do každého oka, čímž se obnoví 3D vidění zcela přirozeně způsob.

Lze namítnout, že VR dokáže vytvořit podobný zážitek v mnoha ohledech, ale Google poukazuje na to, že stávající VR náhlavní soupravy nemají dostatečně široké zorné pole a mají problémy se správným vytvořením obličeje, protože VR náhlavní souprava toho při nošení docela dost blokuje.

Zdroj: Google

Latence a další běžné problémy, které stále sužují internetovou komunikaci, mohou také ovlivnit Starline a trochu, ale zdá se, že by to mohlo odvést lepší práci než to, co jsme od současného 2D videa očekávali řešení.

Projekt Starline používá Google z mnoha důvodů, včetně on-boardingu a schůzek, ale je to tak není jasné, jak široce se v budoucnu setkáme se Starline v kancelářích nebo jiných komerčních oblastech. Prozatím se podívejte na původní video s oznámením společnosti Google níže, abyste jej viděli v akci.