Une mise à jour majeure pour Codex

OpenAI a confirmé le mois dernier, via The Wall Street Journal, qu'elle développait une application super intégrée pour ordinateur, combinant ChatGPT, son agent de codage Codex et son navigateur Atlas. Bien que cette application ne soit pas encore disponible, OpenAI a dévoilé aujourd'hui une mise à jour significative de Codex, offrant un aperçu de ses ambitions futures.

« Nous construisons cette application super intégrée de manière transparente. »
Thibault Sottiaux, responsable de Codex chez OpenAI, lors d'une conférence de presse.

Pour l'instant, cette mise à jour se concentre sur les développeurs. Thibault Sottiaux précise : « Cette version est destinée aux développeurs. À l'avenir, nous élargirons l'accès à un public plus large. »

De nouvelles capacités pour les agents IA

La dernière version de Codex introduit des agents IA polyvalents, capables d'interagir avec d'autres applications sur un PC. Les utilisateurs peuvent désormais demander à Codex d'ouvrir un programme spécifique ou de choisir le meilleur outil pour une tâche donnée. Cette fonctionnalité, déjà présente dans des applications concurrentes comme Claude Cowork, se distingue par son efficacité : Codex utilise une technologie propriétaire pour exécuter des applications sans surcharger le système, permettant une collaboration fluide entre l'utilisateur et l'IA.

111 nouveaux plugins et un navigateur intégré

OpenAI ajoute également 111 nouveaux plugins à Codex. Ces plugins combinent des compétences, des intégrations d'applications et des connexions au protocole de contexte serveur, offrant à Codex davantage de moyens pour collecter des informations et utiliser les outils indispensables aux développeurs.

Un navigateur intégré est également disponible, doté d'un système de commentaires. Les utilisateurs peuvent demander à Codex d'apporter des modifications précises à une page web ou une application web en cours de développement. Lors d'une démonstration, un membre de l'équipe Codex a utilisé cet outil pour ajuster les marges d'un graphique, évitant ainsi la coupure de l'axe des ordonnées.

Génération d'images et fonctionnalités de mémoire

Codex intègre désormais un outil de génération d'images basé sur gpt-image-1.5. Il peut créer des concepts de produits, des maquettes, des designs frontaux et même des éléments pour des jeux simples. De plus, il utilise des captures d'écran pour valider qu'il suit correctement les demandes des utilisateurs.

OpenAI présente également deux nouvelles fonctionnalités de mémoire. La première permet à Codex de se souvenir du contexte des tâches précédentes pour améliorer ses réponses futures. Avec le temps, cela devrait permettre à Codex d'exécuter des requêtes plus rapidement et avec une meilleure précision. La seconde utilise les informations collectées pour suggérer des actions proactives, comme répondre à un commentaire d'un collègue sur un brouillon Google Docs.

Disponibilité et prochaines étapes

La mise à jour de Codex est progressivement déployée auprès des utilisateurs de l'application desktop connectés. OpenAI continue de peaufiner ses outils pour préparer l'arrivée de son application super intégrée, tout en offrant dès maintenant des fonctionnalités avancées aux développeurs.

Source : Engadget