Wesloo
Alle ThemenThemen

Virtuelle und erweiterte Realität

Motion-to-Photon-Latenz bei VR-Headsets erklärt

Kurze Antwort

Die Motion-to-Photon-Latenz ist die Zeit zwischen einer Kopfbewegung und dem Bild, das das Headset daraufhin zeigt. Sie entsteht aus vielen Einzelabschnitten: Sensorerfassung, Datenübertragung, Anwendungslogik, Rendering und Display-Aktualisierung. Oberhalb von etwa 20 ms wird die Verzögerung für viele Nutzer spürbar und führt zu Schwindel, weshalb VR-Systeme deutlich darunter bleiben sollen.

Das Wichtigste

  • Die Latenz ist eine Summe vieler Teilverzögerungen, nicht ein einzelner Messwert.
  • Ab etwa 20 ms reagieren viele Nutzer mit Schwindel und räumlicher Desorientierung.
  • Für VR gelten Zielwerte unter 10 ms, für AR unter 5 ms.
  • Vorhersage der Kopfbewegung und Reprojection verbergen einen Teil der Latenz, beseitigen sie aber nicht.
  • Genaue Messungen laufen über externe Hardware, weil Software-Selbstmessungen das System verändern.

Die Motion-to-Photon-Latenz VR bezeichnet die Zeitspanne zwischen einer Kopfbewegung und dem Bild, das das Headset daraufhin zeigt. Sie beginnt in dem Moment, in dem der Sensor die Bewegung erfasst, und endet, wenn das Panel das passende Bild ausgibt. Weil Nutzer diesen Versatz nicht ausgleichen können, entscheidet der Wert darüber, ob eine virtuelle Umgebung stabil wirkt oder schwimmt.

Was passiert zwischen Kopfbewegung und Bild?

Die Latenz entsteht nicht an einer einzigen Stelle, sondern setzt sich aus vielen kurzen Abschnitten zusammen, die nacheinander durchlaufen werden. Am Anfang steht die physische Bewegung, am Ende das Licht aus dem Display. Dazwischen liegen Sensorerfassung, Übertragung, Anwendungslogik, Rendering und die Aktualisierung des Panels. Jede Stufe trägt einen Teil zum Gesamtwert bei, und ein einzelner Ausreißer lässt sich an anderer Stelle kaum auffangen.

Ein Teil der Strecke steckt in der Hardware. Eine IMU tastet die Bewegung mit rund 1000 Hz ab, die Kameras eines Inside-Out-Trackings liefern dagegen nur 30 bis 90 Bilder pro Sekunde. Bei kamerabasiertem Tracking kommt hinzu, dass die Bilder erst ausgewertet werden müssen, bevor eine Pose feststeht. Verfahren wie SLAM in der Augmented Reality arbeiten zusätzlich mit einer Karte der Umgebung, was die Verarbeitung weiter verzögert.

StufeVorgangEigenheit
SensormessungIMU oder Kamera erfasst die KopfbewegungIMU mit rund 1000 Hz, Kameras mit 30 bis 90 Hz
ÜbertragungTrackingdaten gehen an die Recheneinheitjede Schnittstelle addiert Zeit
AnwendungslogikEngine verarbeitet Pose und SzenenzustandKomplexität der Szene wirkt direkt auf die Dauer
Renderingdas neue Bild wird berechnetabhängig von Auflösung und Bildrate
Display-Refreshdas Panel zeigt das ErgebnisPaneltyp und Wiederholrate bestimmen den Anteil
NachbearbeitungReprojection und Verzerrungskorrekturkann Latenz kaschieren, nicht aufheben

Welche Motion-to-Photon-Latenz ist bei VR akzeptabel?

Ab etwa 20 ms wird die Verzögerung für viele Nutzer spürbar. In diesem Bereich treten räumliche Desorientierung und Schwindel auf, die als VR-Krankheit oder Bewegungskrankheit beschrieben werden. 20 ms markiert damit die Grenze, ab der es unangenehm wird, nicht das Entwicklungsziel.

Die Anforderungen fallen je nach Anwendung unterschiedlich streng aus. Für VR nennt Heinrich Fink einen Zielwert unter 10 ms, für AR unter 5 ms. Der Unterschied hat einen sachlichen Grund: In AR muss das eingeblendete Bild zur realen Umgebung passen, und kleine Abweichungen zwischen Realität und Overlay fallen sofort auf. In VR gibt es diesen Vergleichspunkt nicht, dort zählt vor allem das Gleichgewicht zwischen gefühlter und gesehener Bewegung.

Warum wird eine Verzögerung als Krankheit spürbar?

Das Gleichgewichtsorgan meldet dem Gehirn bereits eine Kopfdrehung, während die Augen noch das Bild der alten Position sehen. Dieses Auseinanderfallen von körperlichem Empfinden und visueller Rückmeldung löst Übelkeit aus. Besonders deutlich wird es bei schnellen Kopfbewegungen, weil dort pro Zeiteinheit viel Bildwechsel nötig wäre.

Damit wird verständlich, warum selbst eine Anwendung mit hoher Bildrate unangenehm wirken kann. Wenn die Trackingdaten verspätet ankommen oder die Verarbeitung stockt, rettet die Bildrate nichts. Die Wahrnehmung stützt sich auf den Zeitpunkt, an dem die Bewegung sichtbar wird, nicht auf die Anzahl der Bilder pro Sekunde.

Wie wird die Latenz gemessen?

Verlässt man sich auf die Zeitmessung der Software selbst, sind die Ergebnisse oft ungenau. Denn der Messvorgang kostet selbst Zeit und kann das Verhalten des geprüften Systems verändern. Genaue Werte liefert deshalb Hardware, die von außen sowohl die Bewegung als auch das austretende Licht erfasst und dabei nicht in das Gerät eingreift.

Ein Beispiel ist das Messsystem OptoFidelity BUDDY. Es verbindet eine Marker-Konstellation im AR-, VR- oder MR-Inhalt mit der Pose eines Roboters und vergleicht beide Bewegungsprofile, um die Latenz von Ende zu Ende zu bestimmen.

Unterschieden werden zwei Fälle. Bei der vorhergesagten Latenz dreht der Roboter das Headset nacheinander um einzelne Achsen und gleicht das Bewegungsprofil des Inhalts mit dem des Roboters ab. Bei der unvorhergesagten Latenz bleibt das Headset erst für eine festgelegte Zeit still und wird dann mit hoher Geschwindigkeit und Beschleunigung ruckartig gedreht. Dieser zweite Fall ist der kritischere, weil die Vorhersage der Software dann nicht greifen kann.

Mit welchen Techniken lässt sich die Latenz senken?

Da sich die Laufzeit nie auf null bringen lässt, arbeiten Entwickler mit einer Mischung aus Beschleunigung und Kaschierung:

  1. Vorhersage: Aus Geschwindigkeit und Beschleunigung der aktuellen Bewegung schätzt das Tracking eine künftige Pose. Mit diesem Wert rendert die Engine die Szene, statt auf die nächste echte Messung zu warten.
  2. Reprojection und Verzerrungskorrektur: Kurz vor der Ausgabe wird das fertige Bild an die aktuelle Kopflage angepasst, sodass der letzte Abschnitt der Kette überbrückt wird.
  3. Kürzere Wege: Weniger Übertragungsschritte, kleinere Puffer und eine straffe Render-Pipeline senken die Summe, ohne die Bildqualität anzutasten.
  4. Blickpunktabhängiges Rendern: Beim Foveated Rendering wird nur der Bereich scharf gerechnet, auf den das Auge gerade zeigt. Das verlangt zusätzlich eine sehr kurze Eye-Motion-to-Photon-Latenz, weil das Auge sich mit einem Sprung weiterbewegt, bevor die hohe Auflösung nachgeführt ist.

Für Cloud-Rendering bleibt die Latenz die härteste Einschränkung. Die Übertragung über das Netz bringt eine Verzögerung mit sich, die die Komfortgrenze überschreiten kann, egal wie schnell der Server rechnet.

Wo spielt die Latenz außerhalb von Spielen eine Rolle?

In der Forschung dienen VR-Systeme immer häufiger als Messinstrument, etwa bei Untersuchungen zu sensomotorischem Verhalten. Bevor ein Headset als wissenschaftliches Werkzeug dient, muss seine Latenz überprüft werden, weil zeitliche Verschiebungen die Messergebnisse verzerren. Zwei Geräte mit gleicher Bildrate können dabei unterschiedlich reagieren.

Eine niedrige Latenz kommt außerdem der Video-Durchsicht zugute und hält eingeblendete Hologramme stabiler. Wie stark das im Alltag auffällt, zeigt sich bei Passthrough in Mixed Reality: Wenn die Kameraaufnahme der realen Umgebung der Kopfbewegung hinterherläuft, wirkt der Raum bei jedem Schritt weich und wankend, obwohl die Auflösung stimmt.

Wer die Latenz eines Headsets beurteilen will, braucht also zwei Angaben: den Zielwert für die Anwendung und den Nachweis, dass er auch bei plötzlichen Bewegungen gehalten wird. Nur der zweite Punkt trennt ein gutes Tracking von einem, das im ruhigen Betrieb gut aussieht.

Weitere häufige Fragen

Wie hoch ist die Motion-to-Photon-Latenz bei heutigen VR-Headsets?

Hersteller entwickeln auf Werte unter 20 ms hin, weil darüber bei vielen Nutzern Schwindel einsetzt. Für ein gutes Ergebnis in VR gelten unter 10 ms als Ziel, für AR unter 5 ms.

Merkt man den Unterschied zwischen 20 und 10 ms?

Ja, allerdings indirekt. Bei 20 ms klagen empfindliche Nutzer über Unwohlsein und ein schwimmendes Bild, unter 10 ms verschwindet dieser Eindruck bei den meisten. Die Grenze verläuft individuell, sie liegt nicht für alle Personen gleich.

Warum ist die Latenz in AR strenger als in VR?

In AR liegt das virtuelle Bild über der echten Umgebung. Schon kleine Verschiebungen fallen als Doppelkontur oder Rutschen auf, während in VR kein realer Vergleichspunkt existiert.

Lässt sich die Latenz vollständig vermeiden?

Nein. Sensoren, Rechenzeit und Display-Aktualisierung brauchen eine Mindestdauer. Vorhersage und Reprojection verstecken einen Teil davon, beseitigen ihn aber nicht.

Was unterscheidet Latenz von der Bildrate?

Die Bildrate sagt, wie viele Bilder pro Sekunde entstehen. Die Latenz sagt, wie viel Zeit zwischen einer Bewegung und dem sichtbaren Ergebnis liegt. Eine hohe Bildrate garantiert keine niedrige Latenz, wenn Tracking oder Verarbeitung hinterherhinken.

Verwandte Seiten

  • Haptisches Feedback VR: Wie Controller und Anzüge fühlen

    Haptisches Feedback in VR erzeugt eine spürbare Rückmeldung auf der Haut, damit Gesehenes und Gefühltes zusammenpassen. Vibrotaktile Controller sind der Standard, Kraftrückkopplung und Ultraschall decken Sonderfälle ab, Ganzkörperanzüge verteilen viele Motoren über den Rumpf. Kein einzelnes Gerät erreicht alle Reizarten der Haut.

  • SLAM Augmented Reality: Funktionsweise und Nutzen

    Das Verfahren Simultaneous Localization and Mapping (SLAM) kombiniert die räumliche Erfassung einer fremden Umgebung mit der zeitgleichen Berechnung des eigenen Standorts. In der erweiterten Realität sorgt diese Technologie dafür, dass virtuelle 3D-Objekte stabil an physischen Oberflächen haften, anstatt bei Bewegung zu zittern oder abzudriften. Mathematische Optimierungsverfahren korrigieren Messfehler kontinuierlich in Echtzeit.

  • Spatial Audio VR Funktionsweise: Akustik im 3D-Raum

    Spatial Audio in Virtual Reality bildet die akustische Wahrnehmung im dreidimensionalen Raum digital nach. Das System berechnet Laufzeit- und Lautstärkeunterschiede zwischen beiden Ohren sowie individuelle Frequenzfilterungen in Echtzeit. Durch kontinuierliches Head-Tracking bleiben Schallquellen bei Kopfbewegungen ortsstabil in der virtuellen Welt verankert.

  • Optische Wellenleiter AR-Brille: Physik und Aufbau

    Optische Wellenleiter in Augmented-Reality-Brillen leiten kollimiertes Licht eines Miniaturprojektors mittels Totalreflexion durch ein transparentes Glas- oder Kunststoffsubstrat direkt ins Auge. Auf diese Weise verbinden sie digitale Einblendungen mit der realen Umgebung, ohne das Sichtfeld durch sperrige Bauelemente zu verdecken. Die Technologie ermöglicht extrem flache Brillengläser und eine unauffällige Unterbringung der Projektionseinheit im Brillenbügel.

  • Foveated Rendering Erklärung: Technik und Funktion

    Foveated Rendering ist ein grafisches Berechnungsverfahren für VR- und AR-Headsets, das den Bildbereich im direkten Fokus des Auges mit maximaler Auflösung darstellt und die periphere Sicht mit reduzierter Qualität berechnet. Durch diese selektive Schärfeverteilung sinkt die Auslastung des Grafikprozessors erheblich, ohne dass die wahrgenommene Bildqualität für den Betrachter abnimmt.

  • Wie funktioniert Passthrough Mixed Reality in Headsets?

    Passthrough-Systeme erfassen die physische Umgebung über außen montierte Kameras und leiten die Bilder als Echtzeit-Videostrom an interne Displays weiter. Spezielle Entzerrungsalgorithmen korrigieren den optischen Versatz zwischen Kameralinsen und Augenpositionen, um Schwindelgefühle zu vermeiden. Durch die Überlagerung dieses Videobilds mit 3D-Computergrafiken entsteht ein kombinierter Raumeindruck mit Tiefenwahrnehmung.

Wie diese Seite entstanden ist

Vor dem Schreiben wurde das Thema in den unten genannten Quellen recherchiert. Danach hat die Seite automatische Qualitätsprüfungen bestanden.

Einen Fehler auf dieser Seite melden