跳转到内容

桌面键鼠自动化

读完你能:让 AI 安全地操作 Windows 应用:确认前置条件、把任务写清楚、把风险管住。

这是浏览器覆盖不到的部分:操作 Word、Excel 等办公软件,调整系统设置,完成成批的重复点击和输入。它通过 桌面自动化助手 使用——助手是入口,本页讲清楚细节和分寸。

条件怎么确认
电脑是 Windows当前仅支持 Windows 10 / 11(macOS / Linux 版本即将上线)
本机桌面服务已启动「自动化状态」卡片的「桌面自动化(desktop-automation)」分区「本地服务」显示在线;未运行时按提示确认 client.exe 已启动
慧AI登录令牌有效设置 → 必要配置 检测令牌通过
「桌面控制」资源有效「必要配置」页的账号信息里查看「桌面控制」;显示「未购买」时点 前往购买
场景例子
办公软件操作在 Word 里输入并排版一段文字、在表格里填数
系统设置调整打开 Windows 设置改一项显示选项
批量重复操作一批窗口里做同样的点击、输入、导出

浏览器里能完成的事,优先用浏览器自动化,见 浏览器自动化

  • 具体到应用名和窗口内容:写「在记事本窗口里输入××」,不要只写「帮我处理一下」
  • 说清边界:允许操作哪个窗口、不要碰什么、做完什么算完成
  • 一步一确认:让它在每一步开始前先说明要做什么,你确认后再继续

示例(一条可以直接用的写法):

只操作记事本窗口:在文档里输入“会议纪要”四个字。
每一步开始前先告诉我要做什么,等我确认再执行。
不要保存,不要关闭窗口,完成后告诉我执行了哪些步骤。

第一次使用,先让它「只说不做」:

先不要操作。描述你将对当前桌面执行的每一步,等我确认后再开始。

它描述的步骤和你的预期一致,再允许它真正动手。执行中它会主动同步进度;发现不对,随时点输入框的 停止 按钮,任务和自动化操作会一起停下。

风险控制方式
误点、误输入只观察试跑通过后再放手;开始前关掉无关窗口
涉及钱不会自动支付;支付操作一定先向你确认,重要支付建议全程人工在场
删除重要文件删除重要文件前必须向你确认;拿不准就拒绝并自己动手
系统级确认窗口遇到 Windows 管理员(UAC)确认这类系统级弹窗,停下来由你人工处理

重要操作(支付、删除、提交)执行时请留在电脑前。

  • 「自动化状态」卡片的桌面自动化分区显示「本地服务」在线,令牌与「桌面控制」资源有效
  • 只观察试跑中,它描述的步骤与你的预期一致
  • 打开「屏幕墙」能清晰看到 AI 每一步自动化点击的实际画面
  • 一个写清边界的任务被执行完成,且没有碰允许范围之外的窗口
  • 执行中点 停止,鼠标键盘立刻不再自动动作