HereSphere VR Video Player Demo

HereSphere ist ein VR-Videoplayer, der die Immersivität stereoskopischer VR-Videos verbessert, um das Gefühl der "Präsenz" zu erreichen. Das umfassende Projektionssystem von HereSphere ermöglicht eine unglaublich genaue Projektion von äquirektangulären und Fisheye-Videos.

Es kann Linsenverzerrungen, Kamera-Stereo-Ausrichtungsfehler, Video-Stitching- und Produktionsfehler korrigieren und sogar das Bild an die IPD des Betrachters, die Kopforientierung und die Position anpassen. Die aktuelle VR-Videotechnologie verwendet zwei stationäre Kameras mit Weitwinkel-Fisheye-Objektiven, um Stereovideos aufzunehmen.

Die Projektion der aufgenommenen Bilder auf ein VR-Headset-Display bringt mehrere Herausforderungen mit sich, die HereSphere bewältigen möchte. Erstens erzeugen die Fischaugenlinsen optische Verzerrungen. Diese Verzerrungen werden typischerweise in der Postproduktion behandelt, indem die Fisheye-Bilder in ein äquirektanguläres Format umgewandelt werden.

Während des Konversionsprozesses kann jedoch das falsche Linsenprofil aufgebracht werden, was zu unerwünschten Verzerrungen im endgültigen Bild führt. HereSphere behandelt dieses Problem mit seiner breiten Palette von Linsenprofilen mit einstellbaren FOVs, die es zwischen Linsenprofilen konvertieren kann.

Es hat sogar die Möglichkeit, benutzerdefinierte Linsenverzerrungskurven zu verwenden, so dass es jede rohe Fisheye-Linse oder äquirektanguläre Umwandlung verarbeiten kann. Zweitens ist die Positionierung der Stereokameras zum Zeitpunkt der Aufnahme gesperrt.

Um Tiefe und Maßstab richtig wahrzunehmen, hängt das menschliche visuelle System von der Konvergenz unserer Augen ab (der Winkel, in dem sich unsere Augen drehen müssen, um sich auf ein Objekt zu konzentrieren).

Wenn der Abstand zwischen den Stereokameras nicht mit dem Abstand zwischen den Augen des Betrachters übereinstimmt, entspricht der Konvergenzwinkel, der für die Fokussierung auf ein Objekt erforderlich ist, nicht der Realität für den Betrachter. Wenn der Betrachter seinen Kopf dreht oder bewegt, sind seine Augen nicht mehr in Übereinstimmung mit der Position und Orientierung der stationären Kameras.

Dies führt zu Doppelbildern, Augenermüdung und einer ungenauen Wahrnehmung von Tiefe und Maßstab. HereSphere löst dieses Problem, indem es ein mathematisches Modell mit Echtzeit-Tiefenerkennung verwendet, um die Projektion an verschiedene IPDs, Kopforientierungen anzupassen und sogar die Position des Betrachters zu verfolgen, um Bewegung mit 6DOF zu emulieren.

Drittens gibt es Fehler in der Ausrichtung und Ausrichtung der Stereokameras relativ zueinander, sowie Herstellungsfehler in der Platzierung der Kamera-Photosensoren und Nachproduktions-Stitching-Fehler.

Unsere Augen können unglaublich wahrnehmbar sein, so dass ein Bruchteil eines Grades in der Rotationsausrichtung oder ein Bruchteil eines Millimeters in der Positionsausrichtung oder ein paar Pixel während des Nahtprozesses zu Augenermüdung, Tiefenwahrnehmung und Skalenproblemen führen können. HereSphere verwendet eine umfassende Liste von Stitching- und Ausrichtungseinstellungen, um diese Fehler zu korrigieren.

Der Tiefenerkennungsalgorithmus gibt Entfernungsmessungen aus und kann mit einem Anaglyphenansichtsmodus verwendet werden, der es dem Betrachter ermöglicht, die Bilder leicht zu sehen und anzupassen, um sie perfekt mit überzeugender Tiefe auszurichten. Wenn all diese Probleme behandelt werden, wird das resultierende Bild unglaublich klar, frei von Augenbelastung, und das Gefühl des Eintauchens wird stark verbessert.

HereSphere verfügt auch über die folgenden Funktionen: Bildnachbearbeitungswerkzeuge, wie Schärfen, Farbanpassungen und Tone Mapping Emuliertes räumliches Audio, das das Stereo-Audiosignal abhängig von der Ausrichtung des Betrachters verschiebt - Online-Video-Streaming von Websites, die unterstützte Web-Streaming-APIs implementieren Lokaler Zeitstempelserver zur Synchronisierung von Peripheriegeräten - Gespeicherte Einstellungen und Keyframes, die während der Wiedergabe automatisch zu bestimmten Zeiten geladen werden - Simultane Wiedergabe mehrerer Flachbild-Videos, mit Audio, das automatisch auf das Video vor dem Betrachter fokussiert - Unterstützung für Motion Controller, Gamepad, Tastatur und Maus HereSphere basiert auf Windows Media Foundation und Hardware beschleunigte Decodierung für die Videowiedergabe.

Um h265/HEVC-Videos wiederzugeben, muss die HEVC-Erweiterung für Windows installiert sein. h264 Videos dürfen nicht größer als 4k Auflösung sein und können nur 8-Bit-Farbtiefe haben, aufgrund der Einschränkungen der Hardware beschleunigte Dekodierung von h264 Videos.

Automatisch übersetzte Store-Beschreibung. Verbindlich sind die Angaben im jeweiligen Store.