Siri devient un assistant visuel avec visionos 27 sur le vision pro

À retenir :

siri est transformé en assistant visuel sur le vision pro
l’intelligence visuelle permet d’analyser des objets dans l’environnement
les utilisateurs peuvent interroger siri en regardant un objet
la fonctionnalité est actuellement en bêta et nécessite visionos 27
siri ai comprend le contexte de la conversation entre plusieurs appareils

Avec visionOS 27, Apple améliore considérablement Siri, le transformant en un véritable assistant visuel intégré au Vision Pro. Grâce à Siri AI, qui est enfin accessible en France sur cet appareil, et à l’intelligence visuelle, le casque est désormais capable d’analyser les objets présents dans l’environnement de l’utilisateur ainsi que le contenu affiché sur ses écrans virtuels.

Le fonctionnement de cette nouvelle fonctionnalité a été conçu pour être particulièrement intuitif. Il suffit à l’utilisateur de diriger son regard vers une plante, un livre ou tout autre objet pour interroger Siri à son sujet. L’assistant peut alors identifier l’objet concerné, fournir des informations supplémentaires et même proposer des liens vers le Web. Ce principe s’applique également aux pages ouvertes dans Safari ou au contenu d’une émission visionnée dans le casque.

Siri devient un assistant visuel avec visionos 27 sur le vision pro

Siri AI permet aussi de prolonger la conversation sans avoir à reformuler ce qu’on observe. Si une réponse implique une action possible, visionOS propose un bouton permettant par exemple de rechercher des images similaires ou de réaliser directement une opération suggérée.

Cette capacité d’interprétation visuelle enrichit encore davantage Siri 2.0, qui sait déjà conserver le contexte entre plusieurs appareils. Elle donne un aperçu intrigant des usages futurs envisagés pour les lunettes connectées d’Apple, qui devraient elles aussi tirer parti de la vision par ordinateur pour analyser leur environnement.

Actuellement en bêta sur l’Apple Vision Pro et nécessitant visionOS 27 ou une version ultérieure pour fonctionner correctement, Siri AI est disponible en plusieurs langues : français, anglais, espagnol, japonais, coréen et portugais ; cependant étrangement pas en chinois. Son usage est réservé aux personnes âgées d’au moins 13 ans et certaines requêtes peuvent être soumises à des limitations.

Ainsi, avec cette avancée dans sa compréhension visuelle, le Vision Pro offre une nouvelle dimension interactive : Siri ne se limite plus simplement à répondre aux questions mais devient capable de comprendre ce que l’utilisateur observe réellement