HoRain云小助手个人主页 个人专栏: 《Linux 系列教程》《c语言教程》⛺️生活的理想就是为了理想的生活!⛳️ 推荐前些天发现了一个超棒的服务器购买网站性价比超高大内存超划算忍不住分享一下给大家。点击跳转到网站。专栏介绍专栏名称专栏介绍《C语言》本专栏主要撰写C干货内容和编程技巧让大家从底层了解C把更多的知识由抽象到简单通俗易懂。《网络协议》本专栏主要是注重从底层来给大家一步步剖析网络协议的奥秘一起解密网络协议在运行中协议的基本运行机制《docker容器精解篇》全面深入解析 docker 容器从基础到进阶涵盖原理、操作、实践案例助您精通 docker。《linux系列》本专栏主要撰写Linux干货内容从基础到进阶知识由抽象到简单通俗易懂帮你从新手小白到扫地僧。《python 系列》本专栏着重撰写Python相关的干货内容与编程技巧助力大家从底层去认识Python将更多复杂的知识由抽象转化为简单易懂的内容。《试题库》本专栏主要是发布一些考试和练习题库涵盖软考、HCIE、HRCE、CCNA等目录⛳️ 推荐专栏介绍环境设置安装 Computer Use 插件macOS 权限配置Windows 使用说明使用场景适合使用 Computer Use 的场景Windows 前台使用启动 Computer Use 任务权限与审批应用权限管理敏感操作审批故障排除锁定使用macOS工作原理启用步骤安全机制锁定使用的安全保护安全指南安全操作建议浏览器使用注意事项功能限制数据说明Computer Use电脑操控 是 Codex 提供的一项功能允许 Codex 查看和操作 macOS 或 Windows 上的图形用户界面GUI。当命令行工具或结构化集成无法满足需求时可以使用此功能来完成桌面应用操作、浏览器交互、应用设置调整等任务。Computer Use电脑操控让 Codex 具备了「看」和「操作」桌面应用的能力与命令行工具不同Computer Use 可以直接与图形界面交互包括点击按钮、输入文字、浏览菜单等操作。Computer Use电脑操控功能适用于需要视觉验证或图形界面交互的场景例如测试桌面应用、复现仅出现在 GUI 中的 bug、或者操作没有提供插件的数据源。Computer Use 会影响项目工作区之外的应用和系统状态建议仅用于范围明确的任务并在执行过程中留意权限提示。环境设置在使用 Computer Use 之前需要先完成必要的插件安装和权限配置。安装 Computer Use 插件打开 Codex 设置找到 Computer Use 选项点击 Install 安装 Computer Use 插件。安装完成后即可让 Codex 开始操作桌面应用。macOS 权限配置在 macOS 上需要授予以下两项系统权限权限用途屏幕录制Screen Recording允许 Codex 查看目标应用的界面内容辅助功能Accessibility允许 Codex 执行点击、输入、导航等交互操作系统会在首次使用时弹出权限请求按提示授权即可。Windows 使用说明在 Windows 上Computer Use 需要在活动桌面上运行。执行任务期间目标应用必须保持在当前活动桌面上可见Codex 会接管鼠标指针和键盘输入。在 Windows 上Computer Use 无法在后台运行。如果你需要同时继续使用桌面建议使用虚拟机或第二台设备。接下来我们只要在对话窗口让它打开一个网站它就会使用 Computer Use:使用场景当任务依赖于图形用户界面且难以仅通过文件或命令行输出来验证时应选择 Computer Use。适合使用 Computer Use 的场景场景说明桌面应用测试测试 Codex 正在构建的 macOS 应用、Windows 应用、iOS 模拟器流程或其他桌面应用浏览器操作执行需要通过 Web 浏览器完成的任务Bug 复现复现仅在图形界面中出现的 bug应用设置调整修改需要通过 UI 点击才能完成的应用设置非插件数据源查看或操作没有提供插件的应用或数据源中的信息macOS 后台任务在 macOS 上运行限定范围的后台任务同时继续在其他地方工作跨应用工作流执行涉及多个应用的自动化流程对于本地构建的 Web 应用优先使用 Codex 的内置浏览器in-app browser而非 Computer Use。Windows 前台使用在 Windows 上Computer Use 运行在当前活动桌面上。它无法在后台运行因此在任务执行期间Codex 会移动鼠标指针、输入文字并接管前台操作。如果需要让 Windows 任务在你离开时继续运行有以下两种方案保持 Windows 设备解锁并连接到互联网通过手机的远程控制功能查看进度或发送后续指令。在 Windows 虚拟机中运行 Codex这样 Computer Use 接管的是虚拟机而非你的主桌面。启动 Computer Use 任务在提示词中提及 Computer 或 AppName或者直接让 Codex 使用 Computer Use。需要明确描述 Codex 应操作的具体应用、窗口或流程。可以在输入框输入以下内容调用使用 Computer Use 打开应用复现登录流程中的 bug并修复导致该 bug 的最简代码路径。 每次修改后重新运行相同的 UI 流程进行验证。可以在输入框中使用 Chrome 调用浏览器浏览器例如打开 Chrome 并验证最新改动后结账页面是否仍然正常工作。如果目标应用提供了专用的插件或 MCP 服务器优先使用这些结构化集成来进行数据访问和可重复操作。只有在需要视觉化检查或操作应用时才选择 Computer Use。权限与审批Computer Use 的系统权限与 Codex 中的应用审批是分开的。在 macOS 上屏幕录制和辅助功能权限允许 Codex 查看和操作应用。应用审批则决定你允许 Codex 使用哪些应用。文件读取、文件编辑和 shell 命令仍然遵循线程的沙箱和审批设置。应用权限管理使用 Computer Use 时Codex 只能查看和操作你允许的应用。任务执行过程中Codex 在使用某个应用之前会请求你的许可。你可以选择 始终允许Always allow这样 Codex 以后使用该应用时就无需再次询问。可以在 Codex 设置的 Computer Use 板块中从「始终允许」列表中移除应用。敏感操作审批对于敏感或具有破坏性的操作Codex 可能还会额外请求许可。故障排除如果 Codex 无法查看或控制某个应用请按以下步骤检查在 macOS 上打开 系统设置 隐私与安全性检查 Codex 应用的「屏幕录制」和「辅助功能」权限是否已开启。在 Windows 上确保目标应用在当前活动桌面会话中可见。锁定使用macOS锁定使用Locked Use是 macOS 专属功能。它允许 Codex 在你的 Mac 锁屏后继续使用 Computer Use但需要你事先手动启用。适用场景从已连接的设备发起 Codex 任务任务需要使用桌面应用但 Mac 已经锁屏。工作原理启用锁定使用后Codex 会安装一个 Apple 授权插件authorization plug-in参与 macOS 的解锁流程。锁定使用的设计范围非常有限它不是通用的远程解锁路径也不允许其他应用或本地进程解锁电脑。启用步骤打开 Codex 设置 Computer Use。启用「锁定计算机使用Locked computer use」。从已连接设备启动一个使用 Computer Use 的任务在 Mac 屏幕锁定之后。安全机制当 Codex 任务在 Mac 锁屏后通过 Computer Use 访问应用时Codex 会临时解锁 Mac同时阻止本地使用并保留锁屏保护。解锁前Codex 会验证该解锁请求是否属于一个活跃且受信任的 Computer Use 回合。在该短暂的授权窗口之外Codex 会拒绝解锁并提示你手动解锁。锁定使用的安全保护保护措施说明短时效授权窗口授权窗口仅对当前解锁尝试有效且持续时间很短仅限 Codex 自动解锁自动解锁仅对活跃的 Computer Use 回合中的 Codex 可用覆盖所有显示器桌面临时解锁期间Codex 会覆盖所有显示器画面本地输入检测如果检测到本地键盘或指针输入Codex 会立即重新锁定 Mac 并暂停自动解锁直到你手动解锁安全指南使用 Computer Use 时Codex 可以查看屏幕内容、截取屏幕截图并与目标应用中的窗口、菜单、键盘输入和剪贴板状态进行交互。目标应用中可见的应用内容、浏览器页面、截图和打开的文件都可能被 Codex 在任务执行期间作为上下文处理。安全操作建议建议说明一次一个目标每次只给 Codex 一个明确的目标应用或流程随时可中断你可以随时停止任务或接管电脑的控制权关闭不必要的敏感应用除非任务需要否则保持敏感应用处于关闭状态留意 Windows 前台占用在 Windows 上Codex 会接管前台输入建议使用第二台设备、虚拟机或在亲自使用桌面之前先停止任务避免涉及密钥的任务除非你在场并能批准每一步操作否则避免执行需要密钥的任务审查应用权限提示在允许 Codex 使用某个应用之前仔细查看权限提示谨慎使用「始终允许」仅对你信任 Codex 在未来任务中自动使用的应用选择「始终允许」关键设置需在场涉及账户、安全、隐私、网络、支付或凭证相关设置时务必在场监督注意窗口切换如果 Codex 开始与错误的窗口交互立即取消任务浏览器使用注意事项如果 Codex 使用你的浏览器它可以与你已登录的页面进行交互。请像自己亲自操作一样审查网站行为网页可能包含恶意或误导性内容而网站可能将已批准的点击、表单提交和已登录操作视为来自你的账户。如果需要在 Codex 工作的同时继续使用浏览器可以让 Codex 使用另一个不同的浏览器。功能限制Computer Use 无法自动化终端应用或 Codex 自身因为自动化这些可能会绕过 Codex 的安全策略。它也无法以管理员身份进行身份验证或批准电脑上的安全和隐私权限提示。数据说明文件编辑和 shell 命令仍然遵循 Codex 的审批和沙箱设置。通过桌面应用所做的更改在保存到磁盘并被项目追踪之前可能不会出现在审查面板中。你的 ChatGPT 数据控制设置适用于通过 Codex 处理的内容包括 Computer Use 所截取的屏幕截图。❤️❤️❤️本人水平有限如有纰漏欢迎各位大佬评论批评指正如果觉得这篇文对你有帮助的话也请给个点赞、收藏下吧非常感谢! Stay Hungry Stay Foolish 道阻且长,行则将至,让我们一起加油吧