Mixed Reality (MR) verbindet virtuelle Inhalte mit deiner physischen Umgebung – digitale Objekte prallen von Wänden ab, verstecken sich unter Tischen oder interagieren mit echten Möbeln. Auf Meta Quest basiert MR auf VR-Immersion und AR-Overlays für bessere Erlebnisse.

Auswahl des Immersive-Modus

Virtual Reality (VR): Du kannst vollständig in eine digitale Welt eintauchen. Ideal für umfassende Simulationen und Spiele, bei denen du deine reale Umgebung nicht sehen musst.

Augmented Reality (AR): Überlagert die reale Welt mit digitalen Elementen. Hervorragend geeignet für Heads-up-Displays, Navigationshilfen oder leichte Info-Pop-ups.

Mixed Reality (MR): Verschmilzt virtuelle Objekte mit deiner Umgebung, sodass digitale Inhalte mit Wänden kollidieren, auf Tischen sitzen oder sich hinter Möbeln verstecken. Perfekt für räumlich bewusste Erlebnisse, die sich perfekt in den Raum integrieren.

Arten von MR-Erlebnissen

Statische MR: Erlebnisse im Sitzen oder an einem festen Ort. Beispiel: Ein Strategiespiel auf dem Couchtisch oder ein virtueller Bildschirm an der Wand mit den Avataren deiner Freunde um dich herum.

Dynamische MR: Erlebnisse im ganzen Raum oder in mehreren Räumen. Beispiel: Ein Spukhaus-Szenario, bei dem Geister aus Ecken auftauchen, oder ein Fitnessspiel, bei dem die Bewegung durch Räume verfolgt wird.

2D- und klassische MR: Flache UIs oder 2D-Spiele, die im Raum platziert sind. Beispiel: Schwebende Puzzleteile, Kartenspiele auf dem Schreibtisch oder das Ansehen einer Fernsehsendung auf einem virtuellen Bildschirm.

Beliebte Anwendungsfälle für Mixed Reality

Bildung: Gemeinsame Raumanker platzieren historische Artefakte im Klassenzimmer. Die Schüler*innen können mit virtuellen Fossilien hantieren, 3D-Modelle sezieren und Notizen in echten Notizbüchern machen.

Unterhaltung: Du kannst dein Wohnzimmer in einen Konzertsaal oder eine Sportarena verwandeln. Verfolge Livespiele auf einem riesigen virtuellen Bildschirm oder nimm an E-Sports-Events mit Surround-Sound teil.

Fitness und Wellness: Virtuelle Trainer*innen erscheinen in deinem Raum, demonstrieren Übungen und zählen die Wiederholungen. Mit Passthrough-Gewichten oder getrackten Geräten kannst du sicher zu Hause trainieren.

Produktivität: Virtuelle Büros wie Horizon Workrooms mit Tastatur-Tracking und Handbewegungen. Du kannst mit anderen Personen auf 3D-Whiteboards zusammenarbeiten, die Avatare deiner Kolleg*innen sehen und nahtlos auf deiner physischen Tastatur tippen.

Eingaben und Interaktionen der Nutzer*innen

Mit der Eingabe- und Interaktionssuite des Meta XR SDK können Nutzer*innen auf natürliche Weise mit virtuellen Inhalten interagieren. Von der einfachen Geräteeinrichtung im Core SDK bis hin zum erweiterten Hand-Tracking und Gestensupport sowie Spracherkennung, Tastaturintegration und präzisem haptischen Feedback – alles greift ineinander, damit deine MR-Erlebnisse intuitiv und reaktionsschnell sind.

Core SDK

Initialisiere das Gerät, verwalte den Tracking-Lebenszyklus und konfiguriere MR-Berechtigungen.

Dokumentation ansehen

Interaction SDK

Greife, werfe, male oder forme virtuelle Objekte mit Controllern oder Handbewegungen.

Dokumentation ansehen

Movement SDK

Body-, Face- und Eye-Tracking für Avatare, Fitness-Tracking und ausdrucksstarke Gesten.

Dokumentation ansehen

Tastatureingabe

Tracke echte Tastaturen in MR, damit Nutzer*innen in virtuellen Arbeitsbereichen natürlich tippen können.

Dokumentation ansehen

Voice SDK

Integriere Spracherkennung und Konversationsagenten für Sprachbefehle und NPC-Dialoge.

Dokumentation ansehen

Haptics SDK

Stelle präzise Vibrationsmuster auf Controllern bereit, um das taktile Feedback zu verbessern.

Dokumentation ansehen

Immersion und räumliches Audio

Unsere Immersions- und Audiowerkzeuge sorgen dafür, dass virtuelle Elemente nicht nur real aussehen, sondern auch so klingen und sich nahtlos in die Welt der Nutzer*innen einfügen. Die Passthrough und Depth APIs sorgen dafür, dass die Nutzer*innen in ihrer Umgebung verankert sind, während das Audio SDK einen vollständig räumlichen Klang liefert, der jeder MR-Szene Tiefe, Richtung und Realismus verleiht.

Passthrough API

Du kannst Live-Kamera-Feeds des Raums rendern und virtuelle Inhalte überlagern, ohne dass der reale Kontext verloren geht.

Dokumentation ansehen

Depth API

Du kannst die Umgebungstiefe für realistische Verdeckung abfragen – virtuelle Objekte erscheinen hinter realen Hindernissen.

Dokumentation ansehen

Audio SDK

Verorte Klänge im Raum, damit virtuelle Elemente Audio von ihrer exakten Position im Raum wiedergeben.

Dokumentation ansehen

Szenenverständnis

Mit Szenenverständnis, bestehend aus MR Utility Kit (MRUK), Scene API, Spatial Anchor API und Passthrough Camera API, kannst du Inhalte der realen Welt zuordnen, abfragen und verankern. Du kannst Böden, Wände und Möbel erkennen, virtuelle Objekte persistent machen und gemeinsame Anker für die Ausrichtung mehrerer Nutzer*innen synchronisieren.

MR Utility Kit (MRUK)

High-Level-Toolkit für räumliche Abfragen, Inhaltsplatzierung, -bearbeitung und -freigabe.

Dokumentation ansehen

Scene API

Du kannst die Raumgeometrie – Wände, Böden, Möbel – für eine intelligente Inhaltsplatzierung erfassen und modellieren.

Dokumentation ansehen

Spatial Anchor API

Verankere virtuelle Inhalte an präzisen realen Punkten für dauerhafte Erlebnisse.

Dokumentation ansehen

Passthrough Camera API

Low-Level-Zugriff auf Passthrough-Kamerabilder und Metadaten für personalisiertes Compositing.

Dokumentation ansehen

Verwandle Solo-MR mit unserer Multiplayer- und Social-Plattform in ein gemeinsames Abenteuer. Das Platform SDK verbindet Spieler*innen, verwaltet Sessions, unterstützt Bestenlisten und In-App-Käufe. Das Avatars SDK erweckt realistische digitale Persönlichkeiten zum Leben, und Colocation Discovery stellt sicher, dass alle im selben Raum dieselben virtuellen Objekte in Echtzeit sehen und mit ihnen interagieren.