nvidia utilise l’apple vision pro pour développer des robots humanoïdes


À retenir :
– Nvidia utilise l’Apple Vision Pro pour le développement de robots humanoïdes.
– Le casque aide à contrôler les robots via le microservice MimicGen NIM.
– La formation de modèles nécessite beaucoup de données, ce qui est coûteux et long.
– L’Apple Vision Pro génère des données synthétiques à partir de démonstrations humaines limitées.
– Des entreprises participent au programme pour tester ce service.


Nvidia exploite l’Apple Vision Pro pour le développement de robots humanoïdes. Le casque est utilisé comme un outil permettant de contrôler ces robots au sein du microservice MimicGen NIM de la société. Selon Nvidia, créer des modèles fondamentaux pour les robots humanoïdes demande une importante quantité de données. La téléopération représente une méthode pour collecter des démonstrations humaines, mais ce processus devient à la fois onéreux et chronophage. C’est ici qu’entre en jeu l’Apple Vision Pro.

Ce système permet aux chercheurs et développeurs d’intelligence artificielle de produire une quantité significative de données synthétiques concernant le mouvement et la perception, tout cela à partir d’un nombre restreint de démonstrations humaines distantes. Les développeurs utilisent donc l’Apple Vision Pro pour réaliser quelques démonstrations téléopérées avant de simuler les enregistrements dans Nvidia Isaac Sim. Ils se servent ensuite du microservice MimicGen NIM afin d’élaborer des ensembles de données synthétiques basés sur ces enregistrements.

nvidia utilise l'apple vision pro pour développer des robots humanoïdes
En utilisant ce casque de réalité mixte, le porteur peut observer exactement ce que voit le robot humanoïde. Plusieurs entreprises telles que Boston Dynamics, ByteDance Research, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, Neura Robotics, RobotEra et Skild AI font partie des collaborateurs qui ont rejoint le programme pour tester ce service.

nvidia utilise l'apple vision pro pour développer des robots humanoïdes
Ce partenariat entre Apple et Nvidia est relativement exceptionnel étant donné que les deux entreprises ne sont pas toujours en bons termes. Par le passé, Apple s’était majoritairement tourné vers AMD plutôt que Nvidia pour ses puces graphiques avec les Mac Intel. De plus récemment, il a été annoncé qu’Apple optait désormais pour les processeurs Tensor de Google au lieu du matériel Nvidia dans le cadre du développement d’Apple Intelligence

nvidia utilise l'apple vision pro pour développer des robots humanoïdes
Avatar photo

Nicolas

Rédacteur en chef de Kame House, Nicolas est un passionné des nouvelles technologies et des jeux vidéos depuis toujours. Roule fièrement en Tesla Model 3 depuis 2022 !

Laisser un commentaire