想象一下:当你教新同事做一个复杂操作时,会怎么说?

打开 A 网站 → 点 B 按钮 → 填 C 字段 → 提交。

但如果你要教 AI Agent 呢?

传统做法是写一个 Skill,把任务目标、执行步骤......所有细节写清楚。

而微软开源的新项目:Skill Recorder 则给出了另一种思路:

你亲自做一次,AI 看一遍,自己学会。

打开网易新闻 查看精彩图片

01 项目介绍

Skill Recorder 是微软开源的一个桌面工具。

核心能力:

录下一次你做任务的全过程,AI 自动提炼成可复用的技能(Skill)。

之后 AI Agent 看到类似任务就能自动执行。

打开网易新闻 查看精彩图片

02 项目亮点

1.屏幕录制:

按 ⌘⇧R(macOS)或 Ctrl+Shift+R(Windows)开始录屏,支持:

窗口跟踪:记录活跃应用、窗口切换。

浏览器 URL:macOS 下抓取当前页面地址。

屏幕视频:Chromium 录制,只保留画面有变化时的帧。

剪贴板预览:短文本复制内容用于关联步骤。

语音旁白(可选):用本地 Whisper 模型(99 种语言)实时转写。

2.AI 分析:

点击 Analyze,GitHub Copilot 会:

读取事件时间线,并查看截图。

读取你的语音转写文本。

最后提炼出一个整体意图 + 一组有序步骤列表。

用户可以随时修改这些步骤,直到读起来合适。

PS:首次分析会提示登录 GitHub Copilot(如果还没登录的话) 。

4.生成 Skill / Automation:

审查并编辑分析结果,满意后一键生成:

Skill:SKILL.md 格式,Agent 按需执行。

Automation:带触发器(定时 / 事件),Agent 自动运行。

6.优先原生工具:

优先使用 gh CLI、web_fetch 等 Agent 原生工具。

7.隐私设计:

录制、存储、帧提取、语音转写全在本地。

只有点击 Analyze(事件时间线 + 截图 + 语音转写文本)才上云。

PS:录制时不要输入密码、不要复制 Token 等机密信息,口述也不要 。

03 快速入门

1.macOS / Ubuntu:

2.Windows (PowerShell):

04 适用场景

1.重复性表单提交:

录一次,后续 AI Agent 看到类似表单自动执行。

2.定期报表生成:

录操作,然后生成 Automation,定时自动跑。

3.新人培训:

录老员工操作,提炼生成 Skill,让新人 Agent 照着做。

05 局限

1.需要 GitHub Copilot 订阅 。

2.Analyze 时数据上云,对高度敏感场景需谨慎 。

3.复杂决策操作可能不准,仍需人工审核 。

06 结语

如果你在用 AI Agent 做重复性任务,不妨试试。

我们下期再见!