Microsoft открыла доступ к Skill Recorder: запись действий на экране теперь превращается в навык для ИИ-агента.
Компания Microsoft выпустила Skill Recorder — инструмент, способный превращать рабочие действия пользователя на экране в навык для ИИ-агента.
Принцип работы выглядит довольно простым: вы один раз выполняете задачу самостоятельно, а приложение фиксирует экран, переключения между окнами, посещённые страницы, буфер обмена и голосовые пояснения.
Затем GitHub Copilot восстанавливает цепочку: цель, последовательность шагов и итоговый файл SKILL.md для автоматизации.
Инструмент старается заменить повторяющиеся клики более надёжными методами: API, CLI, gh, web_fetch и встроенными возможностями платформы.
Например, можно один раз показать обработку GitHub Issue, а затем получить готовый навык для массовой работы с похожими задачами.
На данный момент Skill Recorder создаёт навыки и автоматизации для Microsoft Scout, Copilot Cowork и Copilot Studio. Исходный код опубликован под лицензией MIT.
Запись действий хранится локально, однако после нажатия кнопки Analyze скриншоты, события и расшифровка голоса отправляются в облако GitHub. Разработчикам стоит учитывать, что пароли, токены и API-ключи записывать категорически нельзя.
Ознакомиться с проектом можно по ссылке: https://github.com/microsoft/skill-recorder
Ещё новости:
