デスクトップ操作を記録してAIのスキル・自動化を生成。Microsoft、「Skill Recorder」を公開/Windows 11、macOS、Ubuntuに対応するオープンソースアプリ
Microsoftのオープンソース「Skill Recorder」は、デスクトップ操作を記録し、GitHub Copilotで意図と手順を解析してSKILL.mdや自動化を生成するツール。Windows 11、macOS、Ubuntu対応で、ターミナルのワンコマンドでセットアップできるMITライセンス。
画面・ウィンドウ・URL・クリップボード、任意の音声(Whisper)まで記録し、多くは端末内で処理。[Analyze]時だけイベントや画像、音声文字起こしがCopilotへ送られる。
最大の特徴は、操作を録って意図まで読み取り、再利用できるAIスキル/自動化に変換する点。単なるクリック再生ではなく、適切ならネイティブ操作に置き換えて汎用化し、Microsoft ScoutやCopilot Studio等で使える。機密情報の混入には注意が必要。

forest.watch.impress.co.jp








