Google odhaľuje špecifikácie projektu Starline a dôkaz, že je lepší ako Zoom

Zdroj: Google

Keď Google oznámil Projekt Starline na Google I/O 2021 v máji si nikto nerobil ilúzie, že technológia za tým je jednoduchá. Nový biely papier publikoval výskum Google, všimol si 9to5Google, len detaily ako v skutočnosti je táto technika komplikovaná.

Všetko to začína dizajnom kabíny, ktorá je podobná známej kabínke reštaurácie a poskytuje používateľom pohodlné miesto na sedenie, kým sa na diaľku stretávajú alebo konverzujú s inými ľuďmi. Google tvrdí, že si na tento účel zvolil predovšetkým dizajn sedenia.

Keďže pohodlie bolo prvoradé pre dizajn, Google sa rozhodol vyvinúť technológiu, ktorá nevyžaduje, aby používatelia nosili čokoľvek – ako

Google chcel tiež zabezpečiť, aby používatelia mali voľnosť, aby sa mohli trochu pohybovať, naťahovať si nohy a stále mať úplný výhľad na osobu na druhom konci od hlavy po pás.

Google postavil stánky Project Starline so schopnosťou zobraziť realistickú 3D rekreáciu osoby na druhom konci, spolu s schopnosť pozerať sa na ne z viacerých uhlov, udržiavať očný kontakt a dokonca počuť zvuk, ako keby vychádzal z inej osoby ústa.

Zdroj: Google

Aby to bolo možné dosiahnuť, Project Starline zaznamenáva a sleduje jednotlivcov pomocou sady troch „podov“ – dvoch umiestnených nad displejom na ľavej a pravej strane a jedného v strede pod displej – ktorý obsahuje štyri synchronizované monochromatické kamery s rozlíšením 1280 × 1024 pracujúce pri 120 Hz, s filtrami na blokovanie blízkeho infračerveného svetla, aby nedošlo k chybnému výberu dodatočných informácií na displeji hore.

Zamyslite sa nad tým, ako by sa diaľkové ovládanie Wii zbláznilo, keď do miestnosti zalialo slnečné svetlo, a rýchlo pochopíte dôležitosť blokovania tohto typu svetla.

Spodná časť obsahuje extra RGB kameru, ktorá zachytáva farby potrebné na správnu replikáciu jednotlivca v 3D priestore. V týchto moduloch sa nachádzajú aj štyri kardioidné mikrofóny, ktoré pomáhajú systému replikovať presne tam, odkiaľ zvuk prichádza, keď nakoniec znovu vytvorí osobu na druhom konci.

Zdroj: Google

Obrazové a zvukové informácie zachytené z týchto kamier sa potom vykreslia na počítači Lenovo P920 so štyrmi GPU — to sú dva GPU NVIDIA Quadro RTX 6000 a dva GPU NVIDIA GeForce Titan RTX – potom odoslané cez internet cez WebRTC. V podstate sa zložený obrázok vytvorí pomocou všetkých obrázkov strukov spojených do jedného veľkého kusu.

Rekreácia osoby sediacej v stánku Project Starline v 3D vykreslení umožňuje spoločnosti Google nielen odosielať obrázky vo vyššej kvalite, ako je možné doručiť prostredníctvom 2D videa ako nájdete na Zoom, Skype alebo FaceTime, ale tiež poskytuje možnosť pohybovať a otáčať 3D modelom, aby ste vytvorili ilúziu trojrozmernej osoby sediacej pred vy.

Tento displej je vlastný 65-palcový 8K panel so stereoskopickými šošovkami, ktoré majú aspoň prechodnú podobnosť s displejom Nintendo 3DS, ktorý používa paralaxovú bariéru. Na rozdiel od paralaxovej bariéry, ktorá má malé „sladké miesto“, kde sa vytvára 3D obraz, šošovky v Projekt Starline sa používa na odoslanie iného obrazu do každého oka, čím sa obnoví 3D videnie úplne prirodzene spôsobom.

Dá sa tvrdiť, že VR dokáže vytvoriť podobný zážitok v mnohých ohľadoch, ale Google poukazuje na to, že existujúce náhlavné súpravy VR nemajú dostatočne široké zorné pole a majú problémy so správnym vytvorením tváre, pretože náhlavná súprava VR ju pri nosení dosť blokuje.

Zdroj: Google

Latencia a iné bežné problémy, ktoré stále trápia internetovú komunikáciu, môžu tiež ovplyvniť Starline a trochu, ale zdá sa, že by to mohlo odviesť lepšiu prácu, než akú sme od aktuálneho 2D videa očakávali riešenia.

Projekt Starline používa Google z mnohých dôvodov, vrátane on-boardingu a stretnutí, ale je to tak nie je jasné, do akej miery sa bude Starline v budúcnosti používať v kanceláriách alebo iných komerčných priestoroch. Zatiaľ si pozrite pôvodné video s oznámením spoločnosti Google nižšie, aby ste ho videli v akcii.