OpenAI обновляет Codex: новые функции для разработчиков и предвестники суперприложения

Компания OpenAI анонсировала крупное обновление своего инструмента Codex, которое расширяет его возможности и демонстрирует потенциал будущего суперприложения. Как сообщалось ранее в The Wall Street Journal, OpenAI разрабатывает десктопное суперприложение, объединяющее ChatGPT, Codex и браузер Atlas. Однако сегодняшний релиз не включает это приложение, а представляет собой обновление Codex, которое даёт представление о будущих амбициях компании.

«Мы создаём суперприложение открыто», — заявил Тибо Соттиа, глава подразделения Codex во время пресс-брифинга. «Этот релиз ориентирован на разработчиков. В будущем мы планируем расширить функционал для более широкой аудитории».

Новая версия Codex наделяет ИИ-агентов расширенными возможностями, включая работу с компьютерными приложениями. Теперь агенты могут взаимодействовать с программами на ПК: пользователь может указать конкретное приложение или доверить выбор модели. Отличительной особенностью OpenAI является «секретный соус» — технология, позволяющая агенту запускать приложения без значительной нагрузки на систему, обеспечивая плавную совместную работу.

Обновление также включает 111 новых плагинов, которые расширяют контекстные возможности Codex, интегрируются с другими инструментами и подключают серверы протокола модели. Это позволяет агентам эффективнее собирать данные и выполнять задачи, востребованные разработчиками.

Среди других нововведений:

• Встроенный браузер с системой комментариев, позволяющий корректировать элементы веб-страниц или веб-приложений по запросу. Например, в демо-версии Codex изменил поля графика, чтобы ось Y не обрезалась.
• Генерация изображений с помощью модели gpt-image-1.5. Codex может создавать макеты, дизайн интерфейсов, концепты продуктов и даже ассеты для простых игр. Также он способен использовать скриншоты для проверки корректности выполнения запроса.
• Функции памяти — две новые возможности: первая позволяет Codex сохранять контекст из предыдущих задач для ускорения и улучшения качества выполнения будущих запросов. Вторая — анализируя накопленные данные, Codex может предлагать proactive действия, например, напоминать о необходимости ответить на комментарий коллеги в Google Docs.

Обновлённая версия Codex постепенно становится доступной пользователям десктопного приложения, которые уже авторизованы в системе. Это важный шаг на пути к созданию универсальной платформы, которая, по словам OpenAI, будет развиваться «открыто» для разработчиков и в дальнейшем — для всех пользователей.