Källa: Google
Vad du behöver veta
- Project Starline är ett nytt sätt att få kontakt med människor på distans genom att ge känslan av att vara närvarande med dem, känt som telepresense.
- Montern använder en 8K-skärm med en parallaxbarriärliknande linsuppsättning för att visa 3D-bilder utan användning av glasögon.
- Användarrörelser och ljud spåras via 3 "pods" som används för att göra en verklighetstrogen 3D-version av en person för att överföra trådlöst.
När Google meddelade Projekt Starline tillbaka på Google I/O 2021 i maj var ingen illusion av att tekniken bakom det var enkel. En ny vitt papper publicerad av Google research, upptäckt av 9to5Google, detaljer bara hur komplicerad tekniken faktiskt är.
Allt börjar med båsdesignen, som liknar en välbekant restaurangbås och ger användarna en bekväm plats att sitta medan de träffas eller samtalar med andra människor på distans. Google säger att de valde en sittande design främst för detta ändamål.
Eftersom komfort var avgörande för designen valde Google att utveckla en teknik som inte krävde att användarna skulle bära någonting – som någon av
bästa VR-headset eller 3D-glasögon — och ändå kunna se och höra personen på andra sidan så realistiskt som möjligt.Google ville också se till att användarna hade friheten att röra sig lite, sträcka på benen och ändå få full överblick över personen i andra änden från huvud till midja.
Google byggde Project Starline-bås med förmågan att visa en realistisk 3D-rekreation av personen i andra änden, komplett med förmågan att se dem från flera vinklar, behålla ögonkontakt och till och med höra ljud som om det kom från den andra personens mun.
Källa: Google
För att uppnå detta registrerar och spårar Project Starline individer med en uppsättning av tre "pods" — två placerade ovanför skärmen på vänster och höger sida, och en centrerad under display — som innehåller fyra synkroniserade 1280×1024 monokroma kameror som arbetar vid 120 Hz, med filter för att blockera nära-infrarött ljus så att extra displayinformation inte plockas felaktigt upp.
Tänk på hur en Wii-fjärrkontroll skulle flippa ut när solljus strömmade in i ett rum och du kommer snabbt att förstå vikten av att blockera denna typ av ljus.
Den nedre kapseln innehåller en extra RGB-kamera som fångar den färg som krävs för att korrekt replikera en individ i 3D-utrymme. Fyra kardioida mikrofoner finns också i dessa kapslar, vilket hjälper systemet att replikera exakt var ljudet kommer ifrån när det så småningom återskapar personen i andra änden.
Källa: Google
Visuell och ljudinformation som fångas från dessa kameror renderas sedan på en Lenovo P920 PC med fyra GPU: er — det är två NVIDIA Quadro RTX 6000 GPU och två NVIDIA GeForce Titan RTX GPU: er — som sedan skickas över internet via WebRTC. I huvudsak skapas en sammansatt bild med hjälp av alla poddarnas bilder kombinerade till en stor del.
Den 3D-renderade återskapandet av personen som sitter i Project Starline-båset gör det möjligt för Google att inte bara skicka en bild av högre kvalitet än vad som kan levereras via 2D-video som du hittar på Zoom, Skype eller FaceTime, men det ger också möjligheten att flytta och rotera 3D-modellen för att skapa illusionen av en tredimensionell person som sitter framför du.
Den skärmen är en anpassad 65-tums 8K-panel med stereoskopiska linser, som åtminstone har en övergående likhet med skärmen som finns i en Nintendo 3DS, som använder en parallaxbarriär. Till skillnad från en parallaxbarriär, som har en liten "sweet spot" där 3D-bilden skapas, är linserna i Project Starline används för att skicka en annan bild till varje öga och återskapa 3D-seende på ett helt naturligt sätt sätt.
Det kan man hävda att VR kan skapa en liknande upplevelse på många sätt, men Google påpekar att befintliga VR-headset inte har ett tillräckligt brett synfält och har problem med att återskapa ett ansikte ordentligt eftersom ett VR-headset blockerar en hel del av det när det bärs.
Källa: Google
Latens och andra vanliga problem som fortfarande plågar internetkommunikation kan också påverka Starline a lite, men det verkar som om det kan göra ett bättre jobb än vad vi har kommit att förvänta oss av nuvarande 2D-video lösningar.
Project Starline har använts av Google av många anledningar, inklusive ombordstigning och möten, men det är det inte klart hur mycket vi kommer att se Starline på kontor eller andra kommersiella områden i framtiden. För nu, kolla in Googles ursprungliga tillkännagivandevideo nedan för att se den i aktion.
Missa inte några PlayStation-nyheter som hände i november. Vi har samlat de största berättelserna för dig att kolla in, som Skyrims återutgivning och Elden Rings tekniska test.
December v35-uppdateringen rullas nu ut för Oculus Quest och Meta Quest 2, och kommer med ett halvdussin nya funktioner.
Twitter har meddelat en uppdatering av sin privata informationspolicy som förbjuder att dela bilder eller videor på någon utan deras tillåtelse.
Lagom till semestern har vi samlat de bästa Google Nest-kamerorna på marknaden just nu. Så oavsett om du vill använda säkerhetskameran inomhus eller utomhus, så har vi dig täckt.