Компания OpenAI представила новую функцию Chronicle для приложения Codex, которая позволяет ИИ-агенту наблюдать за экраном пользователя, запоминать его действия и использовать эту информацию как контекст для будущих взаимодействий. Chronicle работает в фоновом режиме, периодически делая снимки экрана, анализируя их и преобразовывая в текстовые сводки, сохраняемые локально в виде нешифрованных Markdown-файлов. По словам президента OpenAI Грега Брокмана, эта возможность дает ассистенту «способность видеть и помнить недавний контекст того, что вы делаете, автоматически обеспечивая полный контекст работы», что ощущается «почти магически». Функция интегрируется с локальными инструментами, такими как VS Code, Cursor и Windsurf, а также с Codex CLI, позволяя агенту ориентироваться в репозитории, редактировать файлы, запускать команды и тесты в изолированных песочницах.
В обновленной версии Codex значительно расширил возможности взаимодействия с macOS: теперь агент напрямую управляет компьютером, «видя» экран, перемещая курсоры, кликая и вводя текст без отвлечения пользователя. OpenAI выкупила компанию Sky, интегрировав ее передовые системы, что позволило внедрить «параллельные курсоры» для фоновой работы с несколькими приложениями одновременно. Агент использует дерево AX для считывания иерархии элементов окон, эффективно справляясь с задачами в программах без API или AppleScript-поддержки. Примеры включают просмотр каналов Slack, ленты Ivory и читалки Unread для составления сводок новостей, а также автоматизацию установки и тестирования файлов Shortcuts в Finder. Тестирования показывают, что Codex действует медленнее опытного пользователя, но с высокой точностью и в фоне, превосходя аналоги от Anthropic и Perplexity.
Архитектура вызвала вопросы конфиденциальности: скриншоты отправляются на серверы OpenAI для обработки и удаляются через шесть часов, а локальные «воспоминания» доступны другим приложениям. Codex также автоматизирует код-ревью в GitHub для личных или командных pull request'ов, помогая писать, проверять и выпускать код быстрее. Для рынка это означает рост продуктивности разработчиков и пользователей, сокращение рутины в программировании и повседневных задачах — от багфиксов до персонального ассистирования с календарями Google и Slack. Итогом обновлений стала более автономная экосистема ИИ-агентов, потенциально повышающая эффективность на 20–30% в рутинных операциях, хотя и требующая внимания к приватности.
Новая функция Chronicle от OpenAI обещает повысить продуктивность разработчиков, автоматизируя рутинные задачи и улучшая взаимодействие с приложениями. Однако вопросы конфиденциальности остаются актуальными.
Источник: https://openai.com/academy/top-10-use-cases-codex-for-work
Комментарии(0)
Оставьте комментарий
Войдите, чтобы присоединиться к обсуждению