Codex dopenai contrôle mac à distance même verrouillé

À retenir :
– Codex peut utiliser des applications Mac à distance.
– Fonctionnalité active même lorsque le Mac est verrouillé.
– Nécessite un plugin et des permissions pour fonctionner.
– Limites géographiques pour l’utilisation de la fonctionnalité.
– Codex peut réaliser des tâches non couvertes par la ligne de commande.


OpenAI a récemment mis à jour son application Codex sur macOS, introduisant une fonctionnalité qui va bien au-delà des simples commandes de code. Désormais, l’IA de Codex peut interagir avec les applications Mac à distance, même lorsque l’écran est éteint et que l’ordinateur est verrouillé.

Cette nouvelle capacité modifie considérablement le fonctionnement de Codex. L’intelligence artificielle n’est plus limitée aux outils accessibles via le terminal ; elle peut désormais manipuler des interfaces graphiques même en l’absence de l’utilisateur. Par exemple, OpenAI a démontré cette fonction en affichant un message sur un Mac verrouillé indiquant que « Codex est en train d’utiliser votre Mac ». De plus, il existe un moyen simple pour reprendre le contrôle : il suffit d’appuyer sur une touche ou de cliquer pour déverrouiller la machine.

Codex dopenai contrôle mac à distance même verrouillé
Pour profiter de cette fonctionnalité nommée Computer Use, l’utilisateur doit installer un plugin spécifique et accorder certaines permissions concernant l’enregistrement d’écran et l’accessibilité. Une fois tout cela configuré, Codex a la possibilité d’interagir avec les fenêtres ouvertes, d’écrire du texte, de naviguer dans les menus ou encore d’utiliser le presse-papiers. Toutefois, ce contrôle se fait sous conditions : Codex demande une autorisation avant chaque intervention dans une nouvelle application et permet à l’utilisateur de conserver cet accès avec une option « Toujours accepter » pour certaines applications.

Codex dopenai contrôle mac à distance même verrouillé
Cependant, OpenAI impose quelques limitations dès le départ. Par exemple, cette fonctionnalité n’est pas accessible dans l’Espace économique européen ni au Royaume-Uni ou en Suisse. De plus, elle ne peut pas automatiser des tâches liées aux applications Terminal ou effectuer des actions nécessitant des droits administratifs.

Cette évolution vise principalement à gérer certaines tâches où la ligne de commande montre ses limites. Par exemple, Codex pourra reproduire un bug présent uniquement dans une interface graphique ou ajuster les paramètres dans diverses applications qu’il aide à créer. Cette mise à jour s’inscrit dans une tendance générale visant à renforcer les capacités de Codex sur macOS.

En outre, OpenAI a introduit Appshots : une fonction permettant d’injecter des captures d’écran ainsi que du texte extraits directement depuis n’importe quelle fenêtre macOS grâce à un raccourci clavier. Le mode /goal pousse encore plus loin cette logique en permettant à un agent IA de travailler vers un objectif sur plusieurs heures voire plusieurs jours

Avatar photo

Hyunkel

Très gros fan de Dragon Quest Dai no Daiboken, de jeux vidéo et de bière. 1 par 1 ou tout en même temps, ça dépend des jours.

16 commentaires sur “Codex dopenai contrôle mac à distance même verrouillé

Laisser un commentaire