visionOS 27: Apples neue Siri sieht und analysiert die Umgebung

Apples Datenbrille erhält mit visionOS 27 eine KI-gestützte Siri. Die Umgebungserkennung und schnellere App-Starts prägen das große Update.

Apple hat auf seiner Entwicklerkonferenz WWDC eine grundlegende Überarbeitung seines Betriebssystems für die Datenbrille Vision Pro vorgestellt. visionOS 27 bringt eine KI-gestützte Siri, die die Umgebung des Nutzers in Echtzeit erfasst und analysiert.

Visuelle Intelligenz: Siri sieht, was der Nutzer sieht

Das Herzstück des Updates ist die Integration von „Apple Intelligence“ in den Sprachassistenten. Durch Blicksteuerung aktiviert, erkennt Siri künftig Objekte in der realen oder digitalen Umgebung und beantwortet kontextbezogene Fragen. In der Präsentation am 8. Juni demonstrierte Apple etwa, wie der Assistent die Größe eines Rucksacks prüft oder Nährwertinformationen zu Lebensmitteln liefert – der Nutzer muss nur hinschauen und den Assistenten aktivieren, der nun als schwebendes 3D-Symbol erscheint.

Anzeige: Die neue Siri in visionOS 27 sieht und analysiert Ihre Umgebung in Echtzeit – aber wie richten Sie die Funktion richtig ein? Dieser kostenlose Guide zeigt Ihnen Schritt für Schritt, wie Sie die Umgebungserkennung aktivieren, die 5 wichtigsten Siri-Befehle für den Alltag nutzen und als Entwickler von den neuen APIs profitieren. Jetzt kostenlosen Praxis-Guide sichern

Die neue Siri verfügt über „Screen Awareness“ und persönlichen Kontext: Sie kann Informationen aus verschiedenen Apps wie Mail, Nachrichten und Fotos zusammenführen und systemweit Aktionen ausführen – vom Verfassen von Texten bis zur Organisation von Safari-Lesezeichen. Eine neue Funktion namens „Image Playground“ erzeugt auf Sprachbefehl fotorealistische Bilder direkt im Headset.

Verbesserte Bedienung und immersive Welten

Das Interface wurde grundlegend überarbeitet. Erstmals lassen sich Fenster für Safari, Freeform und Apple TV krümmen – das soll die Ergonomie verbessern. Neue „Glance-to-Expand“-Benachrichtigungen erweitern eingehende Alarme allein durch den Blick des Nutzers.

Panoramafotos lassen sich in hochauflösende räumliche Szenen umwandeln. Apple hat zudem eine neue Umgebung basierend auf der isländischen Region Thórsmörk integriert, die als Hintergrund für Arbeit oder Entspannung dient. Ein überarbeitetes Kontrollzentrum und extrakleine Widgets runden das Update ab.

Deutlich schneller: Apps starten bis zu 30 Prozent flotter

Die Leistungswerte der aktuellen Beta-Version vom 9. Juni können sich sehen lassen. Apps starten bis zu 30 Prozent schneller, Foto-Ladezeiten sanken um 70 Prozent. Auch die drahtlose Verbindung wurde optimiert: WLAN-Geschwindigkeiten erreichen laut Apple das Dreifache der Vorgängerversion.

Für Entwickler bietet visionOS 27 drei verschiedene Pfade: die Portierung bestehender iOS- und iPadOS-Apps, native Entwicklung mit RealityKit und SwiftUI sowie neue „Spatial Preview“-Frameworks. Letztere erlauben es, 3D-Modelle und räumliche Videos direkt vom Mac zur Live-Vorschau auf die Vision Pro zu senden.

Eine neue API ermöglicht zudem die Verfolgung von Drittanbieter-Zubehör wie Stiften oder Gamecontrollern über LED-Konstellationen, Bewegungssensoren und Bluetooth.

Anzeige: Langsame App-Starts und fehlende KI-Integration gehören der Vergangenheit an: Mit visionOS 27 starten Apps bis zu 30 Prozent schneller und Siri erkennt Objekte in Echtzeit. Erfahren Sie in diesem Guide, wie Sie die neuen Funktionen optimal einsetzen – von der Bildschirmwahrnehmung bis zu den 3 versteckten Entwickler-Features. Praxis-Guide jetzt anfordern

Zeitplan: Public Beta im Juli, Finale Version im Herbst

Die Entwickler-Beta von visionOS 27 ist seit dem 8. Juni verfügbar. Eine öffentliche Beta folgt voraussichtlich im Juli, die finale Version soll im Herbst an die Nutzer ausgeliefert werden.

Die KI-Funktionen von Siri, die auf einer neuen Architektur mit Apples Foundation Models und der Private-Cloud-Compute-Infrastruktur basieren, starten zunächst als Beta auf Englisch. Apple bestätigte, dass die Funktionen bei Veröffentlichung auch in der Europäischen Union verfügbar sein werden. Ebenfalls für den Herbst angekündigt: verbesserte Objektverfolgung und eine überarbeitete „Dwell Control“, die Timer durch eine Haken-Geste ersetzt.