桌面自动化助手
import { CardGrid, LinkCard, Steps, Badge } from ‘@astrojs/starlight/components’;
读完你能:直接在对话框派发任务,让 AI 替你自动点击鼠标、敲击键盘、操作网页与各类 Windows 办公软件。
1. 桌面自动化助手能做些什么
Section titled “1. 桌面自动化助手能做些什么”| 场景分类 | 核心执行方式 | 小白实用场景举例 |
|---|---|---|
| 🌐 网页与浏览器 | browser-harness 控制 Chrome | “帮我打开百度热搜,提取前 10 条新闻并整理为表格” “登录后打开电商后台,统计今日未发货订单” |
| 💻 桌面软件与系统 | 9 大本地键鼠指令 (desktop_automation_*) | “新建一个 Word 文档,把桌面的会议记录排版好存进去” “打开记事本,输入今天的工作总结并保存到 D 盘” “清空回收站并最小化所有窗口” |
2. 首次使用 3 步检测
Section titled “2. 首次使用 3 步检测”-
进入助手选择
在主界面点击 新对话,在助手下拉框中选择 桌面自动化(系统默认置顶推荐)。 -
开启浏览器调试支持(仅首次需要)
打开 Chrome 地址栏输入chrome://inspect/#remote-debugging并勾选允许。或者在 设置 → 慧AI → 自动化状态 卡片中点击「一键打开」。 -
一键检测连通性
在设置的「自动化状态」中点击 检测连接,当浏览器与桌面服务均显示时,即代表完全就绪!
3. 小白实战指令模板(可直接复制)
Section titled “3. 小白实战指令模板(可直接复制)”直接将以下提示词粘贴到对话框发送:
网页抓取类:
“打开浏览器,帮我搜索一下近期的 AI 大模型最新资讯,把排名前 5 的文章标题和链接整理成 Markdown 表格发给我。”
“打开浏览器,帮我搜索一下近期的 AI 大模型最新资讯,把排名前 5 的文章标题和链接整理成 Markdown 表格发给我。”
办公软件类:
“打开电脑里的 Word,新建一份文档,以『2026年季度工作汇报』为标题,写入主要工作进展、存在问题与改进计划三个小节。”
“打开电脑里的 Word,新建一份文档,以『2026年季度工作汇报』为标题,写入主要工作进展、存在问题与改进计划三个小节。”
系统日常维护类:
“帮我查看一下 C 盘剩余空间,并把下载文件夹里今天刚保存的 3 个 pdf 文件移动到『桌面/项目资料』文件夹中。”
“帮我查看一下 C 盘剩余空间,并把下载文件夹里今天刚保存的 3 个 pdf 文件移动到『桌面/项目资料』文件夹中。”
4. 安全防护与一键急停
Section titled “4. 安全防护与一键急停”- 🛡️ 敏感操作主动确认:涉及支付、登录授权、删除文件、清空回收站或发布提交等不可逆操作前,AI 会先弹出弹窗向你确认,点击「允许」才会继续。
- 🛑 一键急停机制:AI 正在执行鼠标点击或输入时,输入框右侧的发送图标会实时变为 停止 按钮。点击它不仅中断 AI 对话,还会立即冻结并终止底层的鼠标键盘自动化操作,绝不会失控。
- 📺 搭配屏幕墙:在右侧打开 屏幕墙 (Screen Wall),可实时查看 AI 操作屏幕的每一步进展。
