Google lance Gemini pour automatiser les tâches sur macOS
À retenir :
- Gemini utilise intelligence artificielle pour contrôler des applications sur Mac.
- L’utilisateur peut décrire ses besoins, Gemini exécute les actions.
- Fonctionnalités incluent la retouche photo et la création de présentations.
- Contrôle total par l’utilisateur sur les actions de Gemini.
- Disponibilité limitée aux États-Unis, réservée à certains abonnés.
Google a récemment mis à jour son application Gemini sur macOS en introduisant une fonctionnalité innovante pour le contrôle des Macs. Grâce à cette avancée, l’intelligence artificielle peut maintenant interagir avec les applications installées, naviguer sur Internet, modifier des fichiers et réaliser des tâches complexes au nom de l’utilisateur. Cette nouvelle fonctionnalité repose sur ce que Google appelle « Computer Use ». L’utilisateur a simplement besoin de décrire ce qu’il souhaite accomplir, et Gemini se charge alors d’effectuer les clics, de saisir le texte, de naviguer dans les menus et de remplir les formulaires nécessaires.
À lire aussi : Départ à la retraite de jon mccormack, responsable photo d’apple
L’IA opère dans une fenêtre virtuelle distincte tout en offrant un aperçu en temps réel de ses actions dans la conversation. Cela permet à l’écran principal et au curseur du Mac de rester disponibles pour que l’utilisateur puisse continuer à travailler.

Des exemples variés illustrent ce que Gemini est désormais capable d’effectuer. Il peut récupérer des informations contenues dans des documents PDF stockés localement et les reporter automatiquement dans des formulaires en ligne. De plus, il peut traiter plusieurs photos via un logiciel de retouche ou encore extraire des statistiques depuis différents tableaux de bord afin d’élaborer une présentation sous Google Slides.
Voici quelques-uns des usages mis en avant par Google :
- Retouche photo : appliquer automatiquement des corrections colorimétriques sur un ensemble d’images.
- Modélisation 3D : préparer des scènes élaborées dans un logiciel dédié à la création 3D.
- Formulaires : extraire dimensions, poids et adresses depuis des fichiers PDF pour compléter divers devis.
- Présentations : rassembler chiffres et captures d’écran provenant de différents tableaux pour concevoir des diapositives.
- Vente en ligne : analyser les images de vêtements pour rechercher leurs prix et rédiger une annonce sur une plateforme dédiée.
Cette automatisation vise principalement à délester l’utilisateur des tâches répétitives qui exigeraient habituellement beaucoup d’efforts manuels. Gemini est également capable d’interagir entre différentes applications afin d’extraire certaines informations nécessaires à leur utilisation ailleurs.
Bien entendu, cette automatisation requiert un accès significatif aux applications ainsi qu’aux fichiers présents sur le Mac. Google permet donc aux utilisateurs de sélectionner lesquels ils souhaitent autoriser auprès de Gemini, tout en offrant la possibilité ou non d’en bloquer certains logiciels définitivement. L’utilisateur peut suivre toutes les opérations en temps réel, interrompre le travail effectué par l’agent quand il le désire et valider toute action sensible avant exécution ; cela s’applique particulièrement aux suppressions datées ou aux messages envoyés contenant potentiellement des informations confidentielles.
De plus, Google propose une option permettant la sauvegarde temporaire liée aux fichiers avant modification lorsque c’est possible ; ces copies sont ensuite conservées pendant 24 heures. Cependant, il convient rester vigilant car comme tout agent autonome, Gemini n’est pas exempt d’erreurs ni ne garantit toujours un comportement prévisible. Google conseille expressément aux utilisateurs ne pas lui confier sans supervision certaines opérations sensibles et leur recommande aussi d’inspecter minutieusement chaque résultat avant exploitation.
Concernant sa disponibilité initiale , cette fonction Computer Use commence son déploiement uniquement en anglais aux États-Unis. Pour y accéder, il faut posséder un Mac doté d’une puce Apple Silicon tournant sous macOS Sequoia 15.0 ou toute version ultérieure ainsi qu’un compte Google associé à une personne majeure abonnée à Google AI Plus, Pro ou Ultra ; notez que les comptes professionnels ou scolaires ne font pas encore partie du dispositif proposé . Aucune information n’a été fournie concernant sa diffusion future hors du territoire américain ou spécifiquement vers la France par exemple .
Avec ce développement , Google s’inscrit ainsi parmi OpenAI et Anthropic qui œuvrent également au perfectionnement assisté permettant la manipulation directe efficace par assistants informatiques






