Auf der Entwicklerkonferenz WWDC26 stellte der Konzern diese Woche ein umfassendes Update für die räumliche Computerplattform vor. visionOS 27 und ARKit 3.0 bringen vor allem eines: eine radikale Verbesserung der Objektverfolgung.
Neues Framework für Drittanbieter-Zubehör
Herzstück der Neuerungen ist das sogenannte Spatial Accessories Framework. Es erlaubt Drittherstellern, spezialisierte Werkzeuge zu entwickeln, die die Vision Pro mit hoher Frequenz verfolgen kann. Die Geräte nutzen Infrarot-LEDs und Bewegungssensoren, um ihre Position im Raum zu bestimmen.
Anzeige: Wer die neuen Tracking-Fähigkeiten von visionOS 27 für seine Fertigung nutzen will, findet in diesem Report die entscheidenden Hebel – von der Integration des Spatial Accessories Framework bis zum CAD-Streaming. Enterprise-Report jetzt anfordern
Die Tracking-Raten liegen zwischen 90 und 120 Hertz – schnell genug für millimetergenaue Arbeiten. Erste Referenz-Kits wie der „seeMote Cap“ und der „Spatial Anchor R1“ kommen von den Partnern DFRobot und MikroE. Bluetooth ist optional und dient etwa für Knöpfe oder haptisches Feedback. Die Kernverfolgung läuft rein über visuelle und Trägheitssensoren.
Medizintechnik im Fokus
Eine neue Metric Space Pose API berechnet die exakten Koordinaten von Objekten im physischen Raum. Das ist besonders für die Medizintechnik relevant: Chirurgische Sonden oder Diagnosegeräte lassen sich so mit höchster Präzision tracken. Auch die Plattform Create ML wurde erweitert – mit einem neuen Trainingsmodus für bessere Objekterkennung.
ARKit 3.0: Einheitliches Tracking auf iPhone und Vision Pro
Die Tracking-Fortschritte bleiben nicht der Datenbrille vorbehalten. ARKit 3.0 bringt die verbesserte Objektverfolgung auf das iPhone mit iOS 27. Entwickler können nun Apps bauen, die auf beiden Geräten gleich funktionieren. Neue Schnittstellen für 3D-Körper- und Hand-Tracking machen dies möglich.
RealityKit erhält zudem Funktionen für realistischere Licht- und Akustik-Interaktionen. „Physical Space Lighting“ und „Reverb Mesh APIs“ lassen virtuelle Objekte natürlicher mit der Umgebung verschmelzen. Hinzu kommen 3D-Gaussian-Splatting und Stoffsimulation – die Grenze zwischen digital und real verschwimmt zusehends.
Siri wird zum visuellen Assistenten
Die Objektverfolgung ist eng mit der neuen Visual Intelligence verknüpft. Das umgestaltete Siri erscheint als 3D-Kugel, die virtuelles Licht auf echte Oberflächen wirft. Der Assistent beantwortet Fragen zu Objekten im Sichtfeld des Nutzers. Große Sprachmodelle auf dem Gerät sorgen für niedrige Latenz.
Die erste Entwickler-Beta von visionOS 27 ist bereits verfügbar. Die Siri-KI-Funktionen befinden sich noch in der Beta-Phase. Bei der finalen Veröffentlichung sollen sie auf Englisch und für Nutzer in der EU zugänglich sein.
Enterprise-Features: CAD-Daten in Echtzeit
Für Unternehmen hält das Update Foveated Streaming und das Spatial Preview Framework bereit. Hochauflösende CAD- und Simulationsdaten lassen sich auf einer leistungsstarken Workstation oder in der Cloud rendern und per WLAN an die Vision Pro streamen. Das System arbeitet mit NVIDIA CloudXR zusammen. Kia nutzt die Technologie bereits für die Design-Validierung mit Autodesk VRED.
Anzeige: Präzisionsdefizite bei AR-Tracking kosten Produktionszeit. Mit visionOS 27 und ARKit 3.0 erreichen Sie millimetergenaue Objektverfolgung – der Report zeigt, wie Sie Ihre bestehenden Workflows anpassen. Tracking-Leitfaden jetzt sichern
Die WLAN-Geschwindigkeit von visionOS 27 soll bis zu dreimal höher sein als bei Vorgängerversionen. Neue gebogene Fenster für Safari und Apple TV nutzen MetalFX-Upscaling, um die 90-Hertz-Bildwiederholrate zu halten.
Entwicklerinteresse bleibt verhalten
Trotz der technischen Fortschritte beobachten Branchenkenner eine Diskrepanz: Aktuell kommt im Schnitt nur etwa eine neue App pro Tag für visionOS. Zum Vergleich: Für das iPhone sind es deutlich mehr. Eine öffentliche Beta von visionOS 27 soll im Juli 2026 erscheinen, der finale Release ist für Herbst 2026 geplant.
