桌面键鼠自动化
读完你能:让 AI 安全地操作 Windows 应用:确认前置条件、把任务写清楚、把风险管住。
这是浏览器覆盖不到的部分:操作 Word、Excel 等办公软件,调整系统设置,完成成批的重复点击和输入。它通过 桌面自动化助手 使用——助手是入口,本页讲清楚细节和分寸。
1. 前置条件
Section titled “1. 前置条件”| 条件 | 怎么确认 |
|---|---|
| 电脑是 Windows | 当前仅支持 Windows 10 / 11(macOS / Linux 版本即将上线) |
| 本机桌面服务已启动 | 「自动化状态」卡片的「桌面自动化(desktop-automation)」分区「本地服务」显示在线;未运行时按提示确认 client.exe 已启动 |
| 慧AI登录令牌有效 | 设置 → 必要配置 检测令牌通过 |
| 「桌面控制」资源有效 | 「必要配置」页的账号信息里查看「桌面控制」;显示「未购买」时点 前往购买 |
2. 适合交给它的场景
Section titled “2. 适合交给它的场景”| 场景 | 例子 |
|---|---|
| 办公软件操作 | 在 Word 里输入并排版一段文字、在表格里填数 |
| 系统设置调整 | 打开 Windows 设置改一项显示选项 |
| 批量重复操作 | 一批窗口里做同样的点击、输入、导出 |
浏览器里能完成的事,优先用浏览器自动化,见 浏览器自动化。
3. 把任务写清楚
Section titled “3. 把任务写清楚”- 具体到应用名和窗口内容:写「在记事本窗口里输入××」,不要只写「帮我处理一下」
- 说清边界:允许操作哪个窗口、不要碰什么、做完什么算完成
- 一步一确认:让它在每一步开始前先说明要做什么,你确认后再继续
示例(一条可以直接用的写法):
只操作记事本窗口:在文档里输入“会议纪要”四个字。每一步开始前先告诉我要做什么,等我确认再执行。不要保存,不要关闭窗口,完成后告诉我执行了哪些步骤。4. 只观察试跑
Section titled “4. 只观察试跑”第一次使用,先让它「只说不做」:
先不要操作。描述你将对当前桌面执行的每一步,等我确认后再开始。它描述的步骤和你的预期一致,再允许它真正动手。执行中它会主动同步进度;发现不对,随时点输入框的 停止 按钮,任务和自动化操作会一起停下。
5. 风险控制
Section titled “5. 风险控制”| 风险 | 控制方式 |
|---|---|
| 误点、误输入 | 只观察试跑通过后再放手;开始前关掉无关窗口 |
| 涉及钱 | 不会自动支付;支付操作一定先向你确认,重要支付建议全程人工在场 |
| 删除重要文件 | 删除重要文件前必须向你确认;拿不准就拒绝并自己动手 |
| 系统级确认窗口 | 遇到 Windows 管理员(UAC)确认这类系统级弹窗,停下来由你人工处理 |
重要操作(支付、删除、提交)执行时请留在电脑前。
- 「自动化状态」卡片的桌面自动化分区显示「本地服务」在线,令牌与「桌面控制」资源有效
- 只观察试跑中,它描述的步骤与你的预期一致
- 打开「屏幕墙」能清晰看到 AI 每一步自动化点击的实际画面
- 一个写清边界的任务被执行完成,且没有碰允许范围之外的窗口
- 执行中点 停止,鼠标键盘立刻不再自动动作
