Spatial Realities

Thomas Riedel Neil Trevett Summary Today, we are heading to Brussels. At the premiere of UnitedXR (YouTube →), I sat down with an absolute heavyweight of the industry: Neil Trevett. If you work in graphics, you know Neil. He is the VP of Developer Ecosystems at NVIDIA, President of the Khronos Group, and Chair of the Metaverse Standards Forum. In this conversation, we dive deep into three key topics: First, the current state of the Metaverse Standards Forum. Second, Apple’s role in XR—and specifically the tension between the USD and glTF file formats. And finally, how standard organizations are handling the explosion of AI assets and new tech like Gaussian Splatting. This interview is essential listening if you want to understand the strategic side of XR and how to navigate the competing narratives in our industry. Exposé+ 1. Reorganization of the Metaverse Standards Forum Trevett explains that the Forum is being streamlined based on initial experiences. Originally, they started with 18 different working groups to identify where the most interest lay. However, due to gaps and overlaps, these groups are now being consolidated into five core areas: • 3D Assets: Formats like glTF and USD, as well as topics like avatars. • Spatial Computing: Sensing, IoT, and connectivity. • Artificial Intelligence (AI): A horizontal topic that touches all areas. • Regulation and Privacy: Without trust in data privacy, the platform will not be used. • Ecosystem: General topics such as education. 2. Definitions of Terms and the „Onion Model“ To resolve the confusion around terms like „Metaverse,“ „XR,“ and „Spatial Computing,“ Trevett uses the analogy of an onion ring: • The Core is XR: An umbrella term for the hardware, meaning Augmented Reality (AR) and Virtual Reality (VR) with sensors and displays. • The Middle Layer is Spatial Computing: This is the term Apple prefers. It describes using displays and sensors to interact with the immediate environment. • The Outer Layer is the Metaverse: This emerges when multiple people using spatial computing are connected with each other. 3. Vision: AR vs. VR Trevett clearly distinguishes his vision from dystopian ideas, such as those outlined in Matthew Ball’s book or „Ready Player One,“ where people spend 24 hours a day in VR. He believes that Augmented Reality (AR) will be the „true metaverse.“ His argument is that AR overlays the real world with contextual information and brings people together, rather than isolating them in a purely virtual world. 4. The Role of Apple He praises Apple as a company capable of building the entire technology stack itself. Although Apple does not currently use open standards for spatial computing, Trevett does not view this negatively. He explains that proprietary platforms can often innovate faster than open standards and that both approaches complement one another. 5. Importance of AI and New Standards AI is described as essential for building the metaverse because it solves problems that previously seemed unsolvable, such as semantic understanding of the environment or gestures. • Hardware Level: The Khronos Group is working on integrating Machine Learning (ML) acceleration directly into graphics APIs like Vulkan so that AI models can run efficiently on glasses. • Gaussian Splatting: A concrete example of new standards is the integration of „Gaussian Splats“ (a technique for rendering 3D scenes) into the glTF format. A draft for this already exists and is scheduled to be finalized in early 2026. 6. The Wish for a „Metaverse Browser“ When asked about a „magic wand“ wish, Trevett responds that the metaverse is the spatial evolution of the web. He wishes for a kind of open-source „Metaverse Browser“ or a sandbox. This would be a collaborative environment where developers can test standards and identify gaps in the interoperability of various 3D web technologies. Shownotes LinkedIn: Neil Trevett The Metaverse Standards Forum YouTube: UnitedXR UnitedXR Europe | The Premier AR/VR Conference & Expo SUPPORT THE SHOW Buy Droid Boy a Coffee MORE EPISODES RSS Feed: Spatial Realities (english only) E114 – XR Journalism in the Crossfire of Hype and Reality with Antony Vitillo & Jan-Keno Janssen – XRC25 – Spatial Realities Podcast XR in Space – Augmented Reality for Astronauts on the Moon with Leonie Bensch – Spatial Realities Podcast E061 – Interview: Avi Bar-Zeev about Spatial Computing and its origins as far as we know it in 1992 – Spatial Realities Podcast Transparency: The Google AI Tool Gemini was used to transcript the interview, generate a summary and correct the intro. Adobes GenAI-Tool for podcasts was used to optimize the on-location recording. Also the chapter marks have been generated with Adobes transcription and Gemini file analysis capabilities. Both tools have been used with caution. For example: You can still hear background noise and even a sirene in the background, although the background noise has been dramatically reduced.

Camillo Stark, Vorstandsmitglied von Next Reality Hamburg e.V., erklärt den neuen Industry Activation Award, der die XR-Branche fördern soll. Er diskutiert die Herausforderungen und Ziele der Initiative sowie die Notwendigkeit eines starken Ökosystems für immersive Technologien. Darüber hinaus wird die wachsende Relevanz von Immersive Video thematisiert, einschließlich der neuesten Entwicklungen bei VR-Geräten und den Bedürfnissen der Content-Produzenten. Stark hebt hervor, wie wichtig Vielfalt und Innovation in der Branche sind.

Camillo Stark, Vorstandsmitglied von Next Reality Hamburg e.V. und Mitinitiator des Industry Activation Award, spricht über Valves spannende Neuvorstellungen: ein leistungsstarker Desktop-PC und innovative Geräte wie Headset und Controller. Er erläutert technische Entscheidungen, die hinter dem neuen Gear stecken. Zudem diskutiert er kritisch den Industry Activation Award, beantwortet Fragen zur Jury und erklärt den Auswahlprozess. Seine Einblicke in die Entwicklung von XR-Projekten bieten wertvolle Perspektiven für die Branche.

Antony Vitillo, ein XR-Entwickler und Betreiber des Blogs 'The Ghost Howls', trifft auf Jan-Keno Janssen, Redakteur bei c’t. Gemeinsam reflektieren sie über die Entwicklung des XR-Journalismus in den letzten zehn Jahren. Antony beschreibt, wie sein Blog von Marketing zu einer technischen Informationsquelle wurde. Jan-Keno erzählt von seinem ersten Eindruck des Oculus Rift und seinem Ansatz, Emotionen statt nur technische Details zu vermitteln. Sie diskutieren den Druck von Big-Tech-Unternehmen und die Bedeutung von Transparenz in der Berichterstattung.

Die neuesten Headset-Releases von Apple, Samsung, Amazon und Varjo stehen im Mittelpunkt. Apple bringt ein Update für die Vision Pro heraus, während Samsung mit dem Galaxy XR auftrumpft, das Sideloading und einen offenen Bootloader unterstützt. Amazons AR-Brille für Lieferfahrer sorgt für spannende Diskussionen über Datenschutz. Varjos überarbeitetes XR-4-Headset fokussiert sich auf Verteidigungskunden. Außerdem wird SnapOS in seiner neuen Version vorgestellt und zeigt innovative Features, die die Interaktion in AR-Systemen revolutionieren könnten.

Michael Gschwandtner, CTO und Mitgründer von XRWorkout, erklärt die spannende Portierung ihrer VR-Fitness-App zu Android XR. Er diskutiert technische Herausforderungen wie Abhängigkeiten vom Meta SDK und die limitierenden Größenbeschränkungen des Google Play Stores. Vorzüge des Galaxy XR, wie optimierte Leistung, werden beleuchtet. Außerdem teilt Michael zukünftige Pläne für KI-generierte Workouts und betont die Wichtigkeit von OpenXR. Wichtige Tipps fürs Portieren und die Integration mit Wearables werden ebenfalls angesprochen.

Fabian Quosdorf, CTO von Mixed World und Experte in der XR-Industrie, teilt seine Einblicke zum neuen Samsung Galaxy XR. Er diskutiert die hardwaretechnischen Unterschiede zur Apple Vision Pro und betont die Bedeutung als erstes Android XR-Gerät. Quosdorf lobt das Google-Style Onboarding und erklärt die innovative motorisierte IPD-Einstellung. Zudem beleuchtet er die starke KI-Integration mit Gemini, zeigt herausragende 3D-Demos und erläutert kommende Midrange-KI-Brillen. Er gibt Entwicklern Tipps zur Portierung auf Android XR.

Jonas Rote, CEO von TimeRide, spricht über die aufregende neue Grusel-Experience in Köln. Er beleuchtet die Herausforderungen bei der technischen Umsetzung, insbesondere beim Live-Betrieb mit mehreren Headsets. Außerdem erklärt er die kreative Story hinter der Experience und die verwendeten Assets. Jonas gibt Einblicke in das Mixed-Reality-Onboarding und verrät, wie das Team das immersive Erlebnis für die Besucher optimieren konnte.

Fabian Knauer, CPTO und Mitgründer von Cosmorama Technologies, spricht über die Entwicklung von Table Troopers, einem VR-Spiel inspiriert von dem Klassiker Worms. Es gelingt dem Hamburger Team, sich für das Oculus Publishing Ignition Programm zu qualifizieren, was den Marktstart erleichtert. Fabian beleuchtet den kreativen Prozess, insbesondere die Herausforderung, ein 2D-Gameplay in 3D zu adaptieren, und betont die Wichtigkeit von kurzen, sozialen Spielsessions. Zudem gibt er Einblicke in die Marketingstrategien und die Rolle von Mixed Reality.

Meta präsentiert revolutionäre Smart Glasses mit beeindruckenden Features wie Conversational Focus und Live-AI. Die neue Oakley Meta Vanguard zielt auf Sportbegeisterte ab, während das Meta Ray-Ban Display mit dem innovativen Neural Band glänzt. Diskussion über die Fortschritte in der Horizon Engine und deren Auswirkungen auf Multiplayer-Erlebnisse. Außerdem wird die Debatte über Contextual AI und deren Einfluss auf die Demokratie spannend aufbereitet. Die Hosts reflektieren die Ambivalenz gegenüber technologischem Fortschritt und den Herausforderungen, die Big Tech mit sich bringt.