Компьютерный помощник Computer Use/08
От запроса — к действию на экране.
Поручите Codex GUI изучать приложения, нажимать элементы управления и проверять результат по снимкам экрана и сведениям об интерфейсе.
Понятная цель. Видимые действия. Проверяемый результат.
Для тех, кто поручает ИИ действия на компьютере, ставя ясные цели и явно выдавая системные разрешения.
01 / Компьютерный помощник Computer Use
Опишите нужный результат
На поддерживаемом компьютере поручите Codex GUI конкретную задачу, например открыть калькулятор и проверить результат вычисления.
- Поиск доступных приложений и чтение сведений об интерфейсе.
- Управление поддерживаемыми окнами и элементами интерфейса.
- Просмотр снимков экрана и результатов инструментов в чате.
02 / Компьютерный помощник Computer Use
Проверьте, что получилось на самом деле
Одно нажатие ещё не означает, что задача выполнена. Помощник может заново изучить интерфейс или снимок экрана и сообщить в чате, достигнута ли цель.
- Ставьте конкретную цель, которую можно проверить.
- Проверяйте результат по состоянию приложения и снимкам экрана.
- Системные подтверждения и выдача разрешений остаются за пользователем.
03 / Компьютерный помощник Computer Use
Включите помощника в своей среде
В поддерживаемых версиях Windows и macOS помощник готовится при первом подключении Codex GUI. Для других папок Codex Home его можно установить, отключить, восстановить или удалить на странице плагинов.
- Поддерживаются Windows x64 и ARM64.
- macOS 13 и новее на Intel и Apple Silicon.
- В macOS пользователь должен выдать разрешения «Универсальный доступ» и «Запись экрана».
Как начать
- Откройте Codex GUI на поддерживаемом компьютере с Windows или на Mac.
- Дождитесь окончания подготовки и выдайте нужные системные разрешения.
- Опишите конкретную задачу и проверьте результат.
Поддерживаются не все операционные системы и приложения. Защищённые системные диалоги, UAC и защищённые окна по-прежнему подчиняются ограничениям платформы, а разрешения выдаёт только пользователь.
Частые вопросы
Работает ли Computer Use в Linux?
Сейчас встроенный помощник поддерживает Windows и macOS 13 и новее. Linux этот плагин не поддерживает.
Можно ли его отключить?
Да. Отключите или удалите его в карточке плагина для нужной папки Codex Home. После обновления отключённый помощник не включится автоматически.