Google nimmt seine riesigen Video-Chat-Kabinen ernst und beginnt mit realen Tests

Erweitern / Ein Stand von Project Starline, ausgestattet mit einem 3D-Bildschirm und einer großen Auswahl an Kameras. Google

Google scheint es mit seiner verrückten "Project Starline"-Videokabinen-Idee tatsächlich ernst zu meinen. Das mysteriöse Projekt wurde im Rahmen der Google I/O 2021 Keynote angekündigt, wurde aber zunächst von handfesteren Wear OS- und Android-Ankündigungen überschattet. Jetzt ist ein Jahr später und Google treibt die Idee immer noch voran und kündigt erweiterte Unternehmenstests mit Drittanbietern an. Google sagt, dass es auch daran arbeitet, Starline "zugänglicher" zu machen.

Project Starline stellt im Wesentlichen die Frage: "Was wäre, wenn Zoom ein riesiger Arcade-Automat wäre?" Während die Heimkonsolen-Version des Video-Chats nur eine kleine Kamera über Ihrem Laptop-Bildschirm beinhaltet, erweckt Starline den 3D-Video-Chat in einer 7 × 7 Fuß großen Sitzkabine zum Leben, scheinbar ohne Rücksicht auf Kosten, Größe oder Marketing zu nehmen. Das Ziel ist es, den Eindruck zu erwecken, dass die andere Person mit Ihnen im Raum ist, und Google stuft es als "Forschungsprojekt" ein.

Was Starline betrifft, so enthält ein Artikel von Google Research ziemlich viele Details. Die Bildschirmseite der Videokabine verfügt über 14 Kameras und 16 IR-Projektoren, die alle dazu dienen, einen fotorealistischen 3D-Avatar des Benutzers in Echtzeit zu erstellen, aufzunehmen und zu verfolgen. Vier Mikrofone und zwei Lautsprecher lesen nicht nur Sprache; Verräumlichtes Audio und dynamisches Beamforming sollen so klingen, als käme Sprache aus dem Mund des Avatars.

Das sind viele Sensoren. Google

Eine kommentierte Version dessen, was alles tut. Es ist eine sehr große Version von Face ID. Google

Hier sind einige der generierten 3D-Avatare zusammen mit ihren Meatspace-Gegenstücken. Google

Durch das Senden eines 3D-Avatars über die Video-Chat-Verbindung kann Google die Augenlinie korrigieren, was bei normalen Video-Chats ein ständiges Problem darstellt. Während eine Webcam über einem Bildschirm den Blickkontakt beim Betrachten eines Bildschirms unmöglich macht, kann ein 3D-Avatar die Trennung zwischen der Mitte einer Kamera und der Mitte eines Bildschirms vortäuschen und gegenseitigen Blickkontakt ermöglichen. Google verarbeitet all diese Daten in einer leistungsstarken Dual-Xeon-Workstation mit "vier NVIDIA-GPUs (zwei Quadro RTX 6000 und zwei Titan RTX)".

Das Display ist ein autostereoskopisches linsenförmiges Panel mit 65 Zoll, 8K, 60 Hz, das eine brillenlose 3D-Ansicht eines lebensgroßen Avatars erzeugt. Es ist im Grunde ein großer Nintendo 3DS, aber mit einem größeren Sweetspot dank Head-Tracking. Die andere Seite der Kabine hat Infrarot-Hintergrundbeleuchtung und eine ziemlich steife Bank, um den Benutzer auf den 3D-Sweetspot des Bildschirms zu beschränken und die Reichweite des gesamten Avatar-Erzeugungssystems zu begrenzen. Google hat sogar eine kleine Barriere zwischen der Bank und dem Bildschirm gebaut, um den unteren Rand des Bildschirms zu verbergen. Anstatt zu sehen, wie ein Avatar unangenehm endet, sobald Sie den unteren Rand des Bildschirms erreicht haben, täuscht eine physische Okklusion über dem unteren Bildschirmrand Ihr Gehirn angeblich vor, dass der Rest des Avatars hinter der Barriere existiert. Google scheint entschlossen zu sein, jede mögliche Variable mit Project Starline zu kontrollieren, so sehr, dass die Kabine sogar über ein eigenes Beleuchtungssystem verfügt, mit sowohl diffuser sichtbarer Beleuchtung zur Unterstützung der 3D-Texturerfassung als auch großer Infrarot-Hintergrundbeleuchtung zur Unterstützung der 3D-Bildgebung.