GitHub Copilot 现在能直接操作桌面软件了。设计师不用写代码，就能让 AI 自动处理 Figma 和剪辑软件，合上电脑它还在云端接着跑。
这标志着 AI 从对话框里的参谋变成了坐在你旁边的实习生。对于靠接单吃饭的设计师来说，你能把机械的切图、批量导出甚至简单的排版交给 AI，自己腾出手去跟客户对需求。
核心看点
- Computer Use 公开预览，AI 直接点击桌面应用控件。
- Copilot Projects 上线，打通 Figma 与 Slack 上下文。
- 跨设备会话连续，手机发指令，云端 Agent 持续干活。
▎不用写代码，AI 直接帮你点鼠标
以前让 AI 干活，你得求爷爷告奶奶找 API 或者写脚本。现在 Computer Use 功能在 macOS 和 Windows 上进入公开预览。AI 能直接读取桌面应用内容，点击控件，输入文本，甚至在没有命令行接口的软件里跨应用导航。你在设置里打开 Enable Computer Use，macOS 用户记得去系统偏好设置里把辅助功能和屏幕录制权限交出来。
在 VS Code 里，这个功能还是实验性质。你需要在设置里搜索 chat.agentHost.computerUse.enabled 并开启，重启编辑器，然后在会话里输入 /computer on。每次 AI 要控制应用时都会弹窗找你批准，企业也能通过策略直接禁用。这功能跟 Copilot CLI 和 Copilot app 共享权限设置，在 Mac 上授权一次就行。对于接外包的设计师，你可以让 AI 帮你批量重命名图层、自动导出不同尺寸的切图，甚至在没有 API 的老旧排版软件里自动填字。
▎从单点工具到跨项目大管家
接活的时候，一个项目往往横跨好几个仓库，还要拉扯设计稿和资产。Copilot Projects 就是为这种场景准备的。你建个项目，把仓库、设计稿、Slack 聊天记录全扔进去，选好模型和工具。AI 会在后台跑多个 Agent，最后把 Pull Request 或者结果交给你。它还能搞项目自动化，比如功能一落地，自动帮你生成一段 promo video。在聊天框里，你也能直接用自然语言生成和编辑图像。
更爽的是跨设备会话连续。早上在 standup 用手机开个云端 Agent，到工位切到 VS Code 接着盯，中午吃饭时用 github.com 看进度。新出的 Agent Host 把会话和 VS Code 窗口隔离开了，你合上笔记本，云端接着跑。你甚至可以在另一台机器上跑 Agent，本地机器照常干别的。手机端也能当遥控器，在开发机上跑个 code agent host --github-environment，手机就能发指令。在 Agents 窗口里，你还能并行跑多个模型和 harness，让 Judge 模型挑出最优解，或者用 Synthesize 把几个思路揉在一起。
▎实操配置与接入指南
想体验这些新功能，直接去下载或更新 GitHub Copilot app。VS Code 用户可以在安装时顺手把 Copilot CLI 装上，Windows 用安装器，macOS 加到 path，Linux 直接跑 copilot 命令。如果你是想把 Agent 接入自己工具的开发者，Agent Host Protocol (AHP) 已经开源，支持 TypeScript、Rust、Go、Kotlin 和 Swift 客户端库。企业管理员也能通过策略控制插件市场，在仓库级别的 .github/copilot/settings.json 里注册默认插件。
GitHub Copilot app 下载与讨论：
Computer Use 官方文档：
Copilot Projects 文档：
Agent Host 与 AHP 协议：
别指望这功能明天就能完美替代你的鼠标。Computer Use 靠的是视觉识别加模拟点击，遇到 Figma 里密密麻麻的图层或者没有明显 UI 边界的插件面板，它大概率会抓瞎。现阶段最聪明的用法，是把它当成一个不知疲倦的宏命令执行器，处理那些规则明确、重复度高的体力活。如果你要在 Mac 上跑 Computer Use，务必先去系统设置里把辅助功能和屏幕录制权限给 VS Code 和 Copilot app 勾上，不然 AI 只能看不能动。另外，云端 Agent 需要你的本地机器和 Agent Host 保持运行，别急着拔电源。Customizations 市场现在也上线了，你可以把 skills、MCP servers 和插件集中管理。等它把跨应用上下文理解透了，我们再考虑把核心设计流程交给它。
点个赞再走？
你平时接活时，最希望 AI 帮你自动化哪个繁琐的设计步骤？
往期推荐
- ·Codex重置预告：创作小项目先准备
- ·1架主机 vs 4架AI无人机，24小时锁定1000个目标
- ·150万SKU对决AI搭配，电商视觉接单浏览量升10%
点击公众号头像 → 历史消息，可翻阅以上文章
