跳转到内容

桌面自动化助手

import { CardGrid, LinkCard, Steps, Badge } from ‘@astrojs/starlight/components’;

读完你能:直接在对话框派发任务,让 AI 替你自动点击鼠标、敲击键盘、操作网页与各类 Windows 办公软件。


场景分类核心执行方式小白实用场景举例
🌐 网页与浏览器browser-harness 控制 Chrome“帮我打开百度热搜,提取前 10 条新闻并整理为表格”
“登录后打开电商后台,统计今日未发货订单”
💻 桌面软件与系统9 大本地键鼠指令 (desktop_automation_*)“新建一个 Word 文档,把桌面的会议记录排版好存进去”
“打开记事本,输入今天的工作总结并保存到 D 盘”
“清空回收站并最小化所有窗口”

  1. 进入助手选择
    在主界面点击 新对话,在助手下拉框中选择 桌面自动化(系统默认置顶推荐)。

  2. 开启浏览器调试支持(仅首次需要)
    打开 Chrome 地址栏输入 chrome://inspect/#remote-debugging 并勾选允许。或者在 设置 → 慧AI → 自动化状态 卡片中点击「一键打开」。

  3. 一键检测连通性
    在设置的「自动化状态」中点击 检测连接,当浏览器与桌面服务均显示 时,即代表完全就绪!


3. 小白实战指令模板(可直接复制)

Section titled “3. 小白实战指令模板(可直接复制)”

直接将以下提示词粘贴到对话框发送:

网页抓取类:
“打开浏览器,帮我搜索一下近期的 AI 大模型最新资讯,把排名前 5 的文章标题和链接整理成 Markdown 表格发给我。”
办公软件类:
“打开电脑里的 Word,新建一份文档,以『2026年季度工作汇报』为标题,写入主要工作进展、存在问题与改进计划三个小节。”
系统日常维护类:
“帮我查看一下 C 盘剩余空间,并把下载文件夹里今天刚保存的 3 个 pdf 文件移动到『桌面/项目资料』文件夹中。”

  • 🛡️ 敏感操作主动确认:涉及支付、登录授权、删除文件、清空回收站或发布提交等不可逆操作前,AI 会先弹出弹窗向你确认,点击「允许」才会继续。
  • 🛑 一键急停机制:AI 正在执行鼠标点击或输入时,输入框右侧的发送图标会实时变为 停止 按钮。点击它不仅中断 AI 对话,还会立即冻结并终止底层的鼠标键盘自动化操作,绝不会失控。
  • 📺 搭配屏幕墙:在右侧打开 屏幕墙 (Screen Wall),可实时查看 AI 操作屏幕的每一步进展。