À retenir : – amélioration des communications immersives sans saturer les réseaux – nouveau brevet de compression pour représentations tridimensionnelles – utilisation du gaussian splatting pour le rendu d’objets – priorité aux yeux et à la bouche pour préserver les expressions – application potentielle dans le vision pro et futures lunettes connectées
Apple s’efforce d’améliorer les communications immersives tout en évitant de saturer ses réseaux et les ressources de ses appareils. Un récent brevet dévoile une méthode de compression spécifiquement conçue pour les représentations tridimensionnelles, avec un intérêt particulier pour les avatars numériques liés au Vision Pro et aux futurs dispositifs de réalité augmentée.
### Une nouvelle approche pour alléger la 3D
Cette technologie repose sur le Gaussian splatting, une méthode de rendu qui utilise un grand nombre de petits éléments tridimensionnels pour recréer les volumes, couleurs et surfaces d’un objet. Bien qu’elle soit capable de produire des visages très réalistes, elle génère également une quantité importante de données. Pour remédier à cette situation, Apple propose une solution consistant à transformer ces paramètres 3D en textures bidimensionnelles, puis à les compresser grâce à des transformations mathématiques et des encodeurs vidéo standards.
Le brevet mentionne notamment un système qui permettrait de réduire le nombre de canaux de données, passant par exemple de 24 à 12. De plus, la gestion des informations liées aux rotations pourrait être simplifiée en réduisant quatre canaux à deux, tandis que celle des couleurs pourrait être diminuée douze vers quatre. Cependant, ces ajustements n’assurent pas nécessairement une diminution du poids total des fichiers.
### Détails prioritaires : yeux et bouche
Une autre innovation intéressante concerne l’adaptation précise du traitement lors de la compression selon l’importance accordée à différentes zones du visage. Ainsi, les yeux et la bouche bénéficieraient d’une attention particulière afin que les expressions restent fidèles durant des échanges virtuels. Cette approche pourrait enrichir l’expérience offerte par le système Personas dans visionOS 26, qui est déjà capable d’imiter les expressions faciales des utilisateurs. Elle s’inscrit également dans la continuité des recherches menées par Apple sur la création d’avatars photoréalistes capables d’interagir avec leur environnement.
Le dispositif envisagé aurait aussi l’intelligence nécessaire pour ajuster dynamiquement sa qualité en fonction du type de connexion disponible; potentiellement via l’utilisation de réseaux neuronaux. Les données compressées seraient envoyées puis reconstituées sur le terminal récepteur.
Au-delà du Vision Pro lui-même, cette technologie pourrait profiter aux smartphones ainsi qu’aux ordinateurs portables et aux futures lunettes connectées d’Apple. Ce brevet suggère ainsi une avancée technique significative qui permettrait d’enrichir les expériences FaceTime en trois dimensions sans exiger trop en termes mémoire ou bande passante. On peut se demander quand nous verrons ces innovations appliquées dans le successeur du Vision Pro ou dans les futures Apple Glasses ?
Extraterestre un peu perché du haut de ma soucoupe, j'aide la bande avec mes articles d'un très haut niveau orthographique. Je suis moi aussi passionné de high tech depuis que mon modem 56K faisait pas mal de bruit en chargeant mon AOL illimité.
