OpenAI Codex lance la fonction d'enregistrement et de relecture

fr.wedoany.com Rapport : OpenAI a dévoilé la fonction « Record & Replay » pour Codex, permettant aux utilisateurs de démontrer un flux de travail une fois sur Mac, que l'agent transforme ensuite en compétence réutilisable pour exécuter automatiquement les tâches ultérieurement, sans avoir à rédiger d'instructions dans les invites.

Pendant l'enregistrement, Codex capture les actions de l'utilisateur et le contenu des fenêtres ; une fois l'enregistrement arrêté, le modèle linguistique analyse la séquence d'étapes et génère un fichier SKILL.md, un document explicatif rédigé en langage naturel décrivant l'ensemble du processus. La compétence ainsi créée peut être exécutée en mode Computer Use, dans les opérations de navigation et au-dessus des plugins connectés. Dans la démonstration d'OpenAI, Codex a ainsi appris à télécharger une vidéo sur YouTube, incluant la sélection du fichier, le remplissage du titre et de la description, le réglage de la miniature et le chargement des sous-titres.

Contrairement aux outils RPA classiques, Codex ne mémorise pas les coordonnées de clic, mais génère des instructions textuelles, interprétées ensuite par un modèle de raisonnement. Ainsi, cette compétence peut être appliquée à de nouvelles données et à l'état le plus récent de l'application, plutôt que d'exécuter une chaîne d'actions codée en dur, qui échoue dès que l'interface change légèrement. Les compétences enregistrées peuvent être partagées avec l'équipe, devenant des solutions d'automatisation prêtes à l'emploi.

Record & Replay est actuellement disponible uniquement sur macOS, et accessible aux abonnés ChatGPT Plus, Pro, Business, Enterprise et Edu, mais pas dans l'Espace économique européen, au Royaume-Uni ni en Suisse. Il s'agit du modèle de déploiement classique d'OpenAI : Windows et d'autres régions seront ajoutés ultérieurement. L'utilisation de cette fonction nécessite que l'utilisateur active le mode Computer Use.