概要
GitHub Copilotに「コンピュータ操作(computer use)」機能が追加され、パブリックプレビューとして公開されました。GitHub Copilot CLIと、macOS・Windows向けのGitHub Copilotアプリで利用できます。この機能により、Copilotはユーザーに代わってデスクトップアプリを直接操作できるようになります。
何が発表・更新されたのか
2026年10月1日、GitHub Copilot Changelogにて「computer use」のパブリックプレビュー開始が発表されました。これにより、Copilotはアプリ画面の内容(アクセシビリティ情報や視覚的な文脈)を読み取り、ボタンのクリック、テキストの入力・編集、キー操作、スクロール、ドラッグ操作、複数アプリをまたいだ作業の進行などを行えるようになります。
公式ブログでは、Safari上で経費精算のワークフローを進める例が紹介されています。APIやコマンドライン、MCP連携を持たない旧来型・GUIのみのソフトウェアでも、Copilotによる自動化の対象になる点が特徴です。
なぜ重要なのか
これまでCopilotの自動化は、APIやCLI、MCP(Model Context Protocol)経由で操作できるツールが中心でした。今回の機能追加により、そうした連携手段を持たないレガシーソフトやGUI専用アプリでも、Copilotが画面を直接操作して作業を代行できるようになります。対応できるタスクの幅が広がる点が、今回の更新の大きなポイントです。
誰に関係があるのか
- GitHub Copilot CLIやCopilotアプリ(macOS/Windows)を利用している開発者・実務担当者
- APIやCLIを持たない業務アプリ・社内システムを日常的に使っている方
- 繰り返し作業や複数アプリをまたぐ定型業務を自動化したい担当者
仕事や業務でどう使えるのか
公式情報で挙げられている活用例としては、以下のようなものがあります。
- ブラウザ上の通知内容を要約してもらう
- プレゼンテーション資料の内容を更新してもらう
- あるワークフロー上で情報を別のステップへ移動させる
利用時は「達成したい結果」「対象となるアプリ」「守るべき制約」を具体的に伝えると、Copilotが意図通りに操作しやすくなるとされています。
注意点
- Copilotがアプリを操作する前には、都度ユーザーの承認が必要です。常に許可するアプリを選んだ場合も、後から見直しやリセットが可能です。
- macOSでは、アクセシビリティと画面収録の権限設定が必要で、Copilotがその設定手順を案内します。
- 組織の管理者設定によって、本機能自体を無効化できます。
- 利用開始方法は、CLIでは「/computer on」で有効化、「/computer show」で状態確認、「/computer off」で無効化が可能です。Copilotアプリでは「設定」>「Computer Use」から「Enable Computer Use」をオンにするか、同様に「/computer on」コマンドでも有効化できます。
- 公式情報上では、日本での提供状況や対象プランの詳細は確認できませんでした。
公式情報
GitHub Copilot can now interact with desktop apps with computer use(GitHub Changelog)
関連キーワード
- GitHub Copilot
- GitHub Copilot CLI
- コンピュータ操作(Computer Use)
- MCP(Model Context Protocol)
- AIエージェント
- 業務自動化





